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内 容 简介 


本 书 是 册 青 年 科研 工作 者 作为 主要 对 象 而 编写 的 ， 本 书 严格 而 系统 地 
阐明 了 数理 统计 的 基本 原理 , 并 尽量 反映 本 学 科 的 现代 辜 瑶 。 关于 应 用 方 
面 只 作为 解释 原理 和 方法 的 手段 , 而 不 是 本 书 的 目的 。 

本 书 主要 内 容 有 : 点 估计, 假设 检验 ; 线性 模型 和 非 参 数 统 计 等 ， 书 末 
附 有 习题 . 
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本 书 的 目的 是 用 严格 的 数学 语言 , 对 数理 统计 学 的 基础 , 作 一 
个 较为 详细 和 较 能 反映 本 学 科 现 代 面 萄 的 介绍 ， 近 几 十 年 来 ， 数 
理 统 计 学 有 了 长 足 的 进展 ， 出 现 了 不 少 论述 各 种 分 支 的 严格 而 内 
容 充 实 的 著作 ， 但 是 , 一 般 的 初等 引 论 性 教 本 , 无 论 在 数学 的 严格 
性 方面 , 还 是 在 内 容 的 深 宏和 广度 方面 , 都 与 这 些 专著 和 杂志 文献 
有 颇 大 的 距离 。 这 种 情况 给 初学 者 造成 了 很 大 的 不 便 ， 本 书 的 写 
作 就 是 希望 有 助 于 解决 这 个 问题 . 

本 书 设想 的 主要 读者 是 数理 统计 和 概率 论 的 青年 研究 工作 
党 ,大 学 本 专业 教师 研究生 和 高 年 级 学 生 ， 有 些 部 分 也 可 以 作为 
统计 考 业 的 有 关 课程 的 教学 参考 书 ， 另外 , 对 于 那些 主要 兴趣 在 
于 统计 的 应 用 而 又 具备 了 较 好 数学 基础 的 人 ， 本 书 可 以 作为 在 理 
论 上 提高 的 参考 ， 

作为 一 种 包含 许多 统计 分 支 的 著作 , 为 使 内 容 不 流 于 空 泛 , 较 
能 反映 现代 面貌 且 要 将 篇 幅 限 制 在 合 型 的 范围 内 ， 在 材料 的 选取 
上 有 着 一 些 不 大 好 处 理 的 问题 ， 本 书 的 作法 是 依据 如 下 的 考虑， 
当 一 个 青年 研究 工作 者 进入 某 一 统计 专门 分 支 时 ， 他 不 仅 应 当 具 
备 为 阅读 该 分 支 的 专著 和 文献 所 必需 的 基础 ， 而 且 应 当 对 其 它 重 
要 的 统计 分 支 的 基本 内 容 有 切实 而 非 空 泛 的 了 解 .因此 ,材料 的 选 
择 , 以 普遍 需要 的 公共 基础 部 分 为 主 , 对 于 那些 只 有 在 专著 中 才能 
妥善 处 理 的 问题 , 则 不 作 过 分 深入 的 讨论 ， 例 如 , 线 任 模型 的 理论 
对 于 回归 分 析 、 方 差分 析 和 和 多 元 分 析 等 统计 分 支 都 有 重要 的 意义 ， 
本 书 在 线性 模型 一 章 中 ， 提 供 了 这 个 理论 的 比较 广泛 和 深入 的 基 
础 ， 掌 握 了 这 个 基础 就 可 以 顺利 地 进入 上 述 几 个 分 支 . 但 是 ,对 上 
述 分 支 的 更 加 专门 和 特殊 的 问题 的 讨论 , 则 不 属于 本 书 的 范围 . 同 
时 需要 指出 , 关于 哪些 内 容 应 列 为 基础 的 问题 , 其 看 法 多 少 有 些 因 
人 而 异 ， 作 者 的 偏好 也 难免 影响 到 对 某 些 材料 的 处 理 , 因此 ,本 书 
中 的 某 些 材 料 也 可 能 越 出 了 多数 人 认为 是 必 备 基础 的 范围 . 例如 ， 


sw i 


$4.3, §5.5, §5.6, §6.2, 86.386.4 等 节 的 大 部 分 或 一 部 分 ， 

本 书 是 一 本 数学 著作 ,在 基本 概念 的 表述 ,问题 提 法 及 定理 论 
证 上 , 力求 符合 现代 数学 的 严格 性 标准 ; 另 一 方面 , 统计 又 是 一 门 
应 用 性 很 强 的 学 科 , 在 学 习 统 计 理 论 时 , 不 能 仅 以 数学 的 严格 性 为 
满足 ,还 应 当 尽 量 了 解 其 实际 背景 ， 本 书 因 性 质 所 限 , 不 便于 涉及 
过 多 的 直接 来 自 实际 的 问题 ， 但 是 , 在 概念 的 统计 背景 的 解释 上 ， 
也 给 予 了 一 定 程 度 的 注意 ， 例 如 , 关于 无 偏 估计 和 Bayes 估计 , 其 
数学 定义 是 简单 的 , 而 我 们 则 花 了 相当 的 入 幅 去 解释 其 统计 背景 . 

为 了 配合 学 习 ， 我 们 选编 了 一 些 习题 ， 队 于 全 书 之 末 . 其 
中 一 部 分 比较 容易 ， 其 它 的 ， 除 了 少数 例外 ， 也 不 需要 特殊 的 技 
巧 ， 但 要 求 谈 者 对 书 中 内 容 有 清楚 的 了 解 ， 并 在 一 定 程度 上 能 
灵活 使 用 ， 对 初学 者 来 说 ， 在 开始 时 作 这 种 题 会 有 困难 ， 但 不 要 
灰心 , 一 定 要 下 最 大 的 功夫 , 反复 思考 , 尽 可 能 多 地 解决 一 些 问题 ， 

作为 一 本 基础 著作 , 本 书 没有 编制 详尽 的 参考 文献 目录 ， 这 
一 方面 是 为 了 节省 篇 幅 ， 也 因为 ， 当 读者 深入 到 某 一 分 支 的 专著 
时 , 会 在 那里 找到 有 关 的 详细 目录 ， 在 正文 的 叙述 中 , 根据 问题 的 
性 质 有 必要 征 引 某 一 文献 时 , 就 在 提 到 的 地 方 注 明 。 除 此 之 外 , 我 
们 在 书 末 列 举 了 在 写作 中 参考 过 的 一 些 著作 。 读者 会 注意 到 , 我 
们 在 一 些 问 题 上 运用 了 这 些 著作 的 叙述 方法 ， 采 用 了 其 中 一 些 例 
题 .习题 , 所 有 这 些 都 不 一 一 加 以 说 明了 . 

在 本 书写 作 过 程 中 ， 曾 与 中 国 科学 院 数学 研究 所 统计 组 一 些 
同志 交换 过 意见 , 参考 和 使 用 过 他 们 的 某 些 讲稿 ， 初 稿 守成 后 , 成 
平 、 项 可 风 、 向 波 、 上 树 森 、 方 开 太 、 吴 传 义 、 李 国 英和 吴 启 光 等 同志 
进行 了 仔细 的 审阅 ,改正 了 不 少 错误 和 提出 了 一 些 改 进 意见 , 这 对 
于 提高 本 书 质量 有 很 大 的 帮助 ， 作 者 说 在 此 对 他 们 表示 衷心 的 三 
谢 、 由 于 作者 水 平 所 限 , 书 中 存在 的 问题 肯定 还 是 不 少 的 , 作者 恩 
切 地 希望 专家 和 读者 提出 宝贵 的 批评 意见 . 


球 希 璃 
1998 年 玛 月 20 日 
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第 一 章 预备 知识 


本 章 内 容 和 分 为 两 部 分 : 第 一 部 分 包括 前 三 节 , 是 关于 概率 论 的 
考 干 补充 知识 . 这些 内 容 对 数理 统计 很 重要 .其 中 第 一 节 的 大 部 
分 内 容 , 是 通常 初等 教 本 中 也 有 的 , 为 适应 本 书 需 要 , 我 们 作 了 者 
干 补充 ; 第 二 三节 的 内 容 在 一 般 初 等 教 本 中 是 没有 揭 , 但 在 本 书 
中 很 常用 , 不 熟悉 的 读者 应 多 加 注意 .第 二 部 分 包括 后 三 节 , 都 基 
数理 统计 基础 的 重要 课题 ， 其 中 关于 判决 函数 的 一 节 ， 是 对 这 个 
理论 的 一 个 最 初步 药 介 绍 ， 而 具体 纲 节 将 在 后 面 各 章 作 一 定 的 充 
实 . 最 后 两 节 对 统计 中 应 用 很 广 的 重要 概念 一 一 充分 统计 量 与 完 
全 统计 量 , 作 了 较为 系统 的 讨论 。 切实 掌握 这 个 内 容 对 阅读 以 后 
各 章 是 很 重要 的 ， 


§1.1. 各 分 布 , t 分 布 . 了 分 布 
(一 ) 委 分 布 的 定义 及 其 密度 函数 的 推导 
定义 更 . 荆 . 卫 ， 设 下 ]，…， 互 。 狐 立 ， 下 ,有 (2 ,i=1， 
m 出 闫 一 己 羡 ; 的 分 布 称 为 具 自由 度 中 非 中 心 参数 
8-( 宜 全 ” 


mh 
的 好 分 布 ， 记 为 于 ~~ 炬 s， 当 5=0 时 , 分 布 称 为 中 心 的 ， 且 记 为 
i 
引 理 1.1.1., 设 吾 b ys .8 满足 定义 1.1.1 中 的 条 性 ， 44= 
(qo)nxn 沟 加 阶 正 交 阵 ， Y= auXs 多 一 了 "和 则 i, ry FY, 


让 上 上 » 


独立 ， 下 1), b= gv, = 了 ， 本 锦 。 
证 ， 由 假定 知 ( 尺 1,"…， 环 驴 的 联合 密度 为 


(Ce) 
Ar 
由 于 4 的 正 交 性 ， 变 换 的 Jaeoki 为 二 于 是 由 密度 函数 变换 的 公 
式 , 注 者 到 
ade -al A AD 
—{y—b rAd'gy— =|y— 6 
此 处 ?了 w= {v1 "ny La) '» y= Cn， "7 Yn 径 一 (aay ”9 an) b= 
人 5 立即 得 到 (人 2， 了 的 联合 密度 为 
TN 
(J [5 二 曙 De 3 

这 就 证 明了 引 理 中 的 全 部 论 汤 ， 

现在 记 了 为 一 正 交 方 阵 , 其 第 一 行为 (oa，…，qy73， 作 变换 
《了 3， yy P= TF, wy 小 . 依 引 理 1.1.1, 了 1， 3 六 。 独 
立 , 正 态 ,方差 为 而 召 (一 阅 at/3 一 2 当 认 二 时 ， 由 多 的 造 
法 知 如 GD) 一 0， 于 是 ,上 册 

X-D X77ItD (z= Yi) C1.1.1) 

君 出 看 的 分 布 只 与 % 和 5 有关 , 

下 面 考虑 王 一 甩 ,的 概率 分 布 ， 以 (vw, 有 和 下 (wn, 及 
记 冯 的 密度 和 分 布 通 数 , 当 5 一 0 时 , 简 记 为 (wl 雹 和 区 (zj 坝 ， 
先 讨 论 3 一 0 的 情 视 ， 尼 热 ， 当 4 守 0 时 ， 下 (| 贡 一 0 而 当 %* 之 9 
时 ， 

Ev) ~ P(E<D = Qn -| foxp( -yyy 

这 里 耳 是 nm 维 网 氏 空 间 Bs, 的 球体 你: 六 YW 过 2} 而 虽 = 4d 
转化 到 球 坐 标 , 不 难看 晶 被 积 函 数 将 变 为 DO, 0,2 el 

1) 今后 总 是 鼎 不 加 4" 的 向 量 为 列 向 是 ， 

Sm 


8 二 商人 em 


的 形状 ， 县 (2 ns Bn-1) 的 积分 范围 与 六 无 英 . 内 此 可 知 
Kwln) =0, | rar (1.2.2) 
其 中 Cr 只 与 % 有关 ,为 求 0s, 令 24>00, 得 
OE -1 ifn 
1 一 0 人 
由 此 得 出 Cn, 代入 志江 . 纹 式 ,两 边 对 z 求 民 , 得 出 , 当 z>0 时 ， 
下 人) 一 (23 工 (全 PE Pe (1.1. 信 
ww | bl 四 
对 3x#0 的 情况 , 利用 外 :IT 了 ,可 转化 为 算 独 立 和 的 密度 : 以 


8 四 记 于 的 密度 , 则 因 了 ta, 四 ,有 9(m) 一 0, 当 w 拟 0, 而 当 
w 祈 0 时， 


sz)-7 访 - vw-Y2[exp(— (Vs 8)2/2) 


+exp(— (Vv +8)/2)] 


-_l Rd a 
= Vg 8 他 +e 
2 w 2 ) 


-一 1 一 二 /多 一 下 二 1 t 1 * 
-7 /30/28 人 ( 忆 于 Ga + 总 厂 (8V2)) 


一 1 一 -1 I [| 
= 元 “ea Ca Brg (1.1.4) 
利用 公式 


kelm =| ko-yln— ly) dy 


-|G-yln -Dy (yay. 
将 红 - 工 .加 (w 政 为 mn 一 和 忆 .1. 人 代入, 逐 项 积分 ,利用 关系 
fe oy ed sat 


= +1 Tut Di H+) 
iatb+2) 
经 过 一 些 简 单 的 整理 ,得 


如 号 


ee 1 82 t tm 
= /2 _- ---- 
Felm 8) emi T) gr “> 
(1.1.6) 
当 #<0 时 , 当然 有 人 | 加 3) ==0, 


{二 ) 入 分布 的 基本 性 质 

38) 车 互 人 好 则 在 ( 工 ) 一 mVaT( 王 一 加， 

b) 若 了 7 并 起 Th 独立 ， 了 ME, 则 
YY 


此 处 n= 富 mm， 面 一 癌 部 
0°) 著 于 1, 人 独 人 将 ， NN (a, ao), j=—1, ", , 则 
ee 1 上 2 2 a 1 | 2 
芭 评语 三 Kms 8 or 部 


这 些 都 极 易 由 妈 分 布 的 定义 直接 征明， 
出 车 时 … 王 * 独 立 同 分 布 ,一 人 09) 而 之 2, 则 


了 ~- (FD) 
(此 处 及 以 后 我 们 总 用 下 表示 X14，…， XZ。 的 算术 平均 工 立 生 
类 似 地 有 了 ,多 等 等 ), 为 总，. 


证 作 正 交 方 阵 
1 .,, _1 
Vn Mn 
码 =| ml -as | .1 
Gn nn 


记 因 = (了 …， 王 由， 作 变 换 名 = 《Za Bo = 及 征 。 则 由 引 
理 1.1.1， 知 Zi …， Zn 狼 立 ，Z~NCB oj 一 1, …, ww， 由 
于 加 (时 ) = (4,…,)'， 由 方 隆 扫 的 形状 易 知 如 一 … 一 各 一 0 又 
Zi 一 Mn 全， 所 以 ,由 和 4 的 正 交 性 ,有 


齐全 于 


oF STI nd II 
1=1 = 玉 


于 是 出 类 分 布 的 定义 , 知 了 一 敲 2?/o*~ 居 -1 
a) 辣 下 sm n= 1, 2, i 则 当 他 -oo 时 ， 
大 -一 外 工 
7 
(二 宪 示 依 分 布 收 合 ), 且 V3 一 V 弛 一 > 入 (0, 1D). 
证 考虑 到 性 质 区 ， 第 一 个 断言 出 妇 的 定义 及 古典 中 心 极 
限定 理 直 接 推出 ， 为 证 第 二 个 断言 ,注意 


sn Fa 轩 
黄 由 sn NCO, D, gv 一 0 及 正 态 分 布 函数 的 连续 


性 , 即 得 要 还 的 结果 ， 

我 们 适 常 用 你 (@) 记 由 关系 式 天 (my =1 一 a 确定 的 t+(0<a 
之 1).， 当 mn 较 大 时 ， 性 质 e) 可 使 我 们 通过 正 态 分 布 表 得 到 次 (四 
之 近似 值 . 

为 了 讨论 下 一 个 性 质 , 定义 如 下 的 概念 设 王 , 了 的 分 布 函 教 
分 器 为 下 (0 和 人 (wm)， 车 对 一 其 和 有 改 () 所 他 人) 即 P(X 这 2) 
>PtY 之 2), 风 称 三 随机 地 大 于 工 , 记 为 圣 污 了 , 

人 车 六 2 而 各 >62, 则 三 下 

证 ， 容易 看 出 , 这 个 性 质 当 mn 一 1 时 成 立 . 这 只 要 注意 克 (0， 
轧 的 密度 为 |z| 的 下 降 丽 数 就 可 以 知道 ， 这 说 明 当 页 > 如 时 
下 屁 | 革 8 宇 下 (11，5)《 实 际 上 成 立 严 格 不 等 号 )。 再 由 

EK (w|m, d= FG-yly, Hak yln—1), 


推出 此 性 质 对 任何 ”成 立 . 


(三 ) 正 瓷 变量 的 二 次 型 (X 分布 的 其 它 性 质 ) 
丛 定 浆 工 工 江 看 到 ， 六 变量 被 定义 为 一 些 正 态 变量 的 平方 
5. 


和 . 平方 和 是 一 种 特殊 的 二 次 型 . 设 羡 ]，…， 下 独立， 
天 

而 4 为 一 个 % 阶 对 称 方 阵 ， 一 般 地 我 们 可 以 考 虚 二 次 潭 了 了 = 
于- 人 有 的 分 布 问题 ， 此 处 四 = (1，…， 王 ,)'， 显 然 ， 不 类 普遍 
性 可 设 o*=1.。， 这 种 二 次 型 在 很 多 统计 问题 中 有 重要 应 用 ， 此 处 
我 们 只 介绍 与 分 布 有 关 的 结集 ， 较 仔细 的 讨论 可 参看 R. 工 . 
Plackott, Principles of Regression Analysig (Oxford, 1960) 一 . 书 
第 二 章 . 

以 下 仍 继 疆 上 一 段 的 编号 . 

名) 设置 = 《于 下 )'， 四 1，…， 下 ,独立 ， 

RN, 1), 4=1, 1, hh, 

记 攻 一 (0 0 go) 于 一 看 ' 寺 至 ,和 4 为 wn 济 对 称 方 阵 ， 则 了 了 服 夭 
好 分布 的 充 要 条 件 为 4 为 宪 等 方 阵 ， 即 43 一 4、 这 时 和 ~ 共 。， 
其 中 =x( 生 ) 为 有 4 之 秩 , 而 人 =a'Aa. 

证 . 充分 性 很 容易 : 车 有 4 为 蜂 等 ， 则 固 其 特征 根 只 能 为 0 和 
1, 且 + 的 个 数 为 rk(4) =r, 褒 存在 正 交 和 阵 :PP 下 

PaP'-(T ?小 
: 0 0 

作 正 交 变 换 2- (2 …, 20)'= PX 
由 引 理 1.1.1, 知 Z~NCP@, 1 ,但 


Y- XAX-Z PAP'Z- 2 于 
由 此 知 了 ~~ 婚 。 其 中 
is-- (BE) CRIN PAP' (EZY 


= (BP ACEPD) 
— (EX)YA(BX) ~a'Aa. 
必要 性 的 证 明 要 利用 特征 函数 , 首先 , 算出 :的 特征 函数 为 


(1 9X8) -2 exp (ay o) 此 处 x 为 常数 ， 而 二 一 (a, 了 D)， 


这 不 难 直 接 由 特征 函数 的 定义 算出 ， 由 此 , 利用 独立 和 的 特征 孙 
数 等 于 各 哉 项 的 特征 函数 之 积 ， 以 及 当 丈 一 站。 时 有 芯 = 了 3 十 
斑 十 … 十 了 ,其 中 一 六 人 1), Yi~B 《0 1), £32, 易 得 Xa 之 
特征 涂 数 为 
人 一 2 的 -sexp( 1 (1.1.7) 
现役 4 不 为 短 等 ， 则 4 之 非 册 特征 概 和 …， 和 不 全 为 IT， 这 时 
图 XAX— DZ 1, Py Zr 独立 ， Zi~ Nloy, 了 [此 椒 (C6, Wt 
外 Plow so] 知 下 "4 下 的 特征 机 数 为 z 
二 (1 -20) -exp( 了 -名 _ ; $). (1.1.8) 
显然 , 要 是 Na， …， (都 不 为 中 中 中 使 有 一 个 不 为 43， 姑 . 直 ,站 和 
(1.1.8) 决 不 可 能 相等 。， 因 而 这 时 至 /全 下 也 不 服从 类 分 布 . 
hn) 设 工 一 下 人 基站 一 下 有 分别 服从 自由 度 为 吧 和 ma 
的 32 分 布 ( 不 必 是 中 心 的 )， 这 里 吾 一 (1 yy 下 ~N(o, ny, 
划 果 好: 一 4 天 0 (有 此 处 及 以 后 以 吾 关 0 表 品 为 半 正 定 方 阵 ， 
呈 >>0 表 如 为 正定 方 阵 ), 目 太 , 不 为 零 方 阵 , 则 
了 一 了 一 一 
服从 自由 订 为 mp 二 mw 一 J 的 YX 分 布 , 了 了; 独立 ,日 .44 一 0. 
证 . 由 假定 知 么 为 对 秘 短 等 且 rk( 息 ) =m， 故 存在 正 交 方 


P,PAP'-(r 9) PasP'~( 0 D 其 中 百 为 “ 


cD 

流 阶 方 阵 ， 由 全 一 本 0 及 4 着 0 易 知性 有 了 D~0。 因 而 C=-0, 
B 0 

即 P4,P 一 ( 0。 0 )， 义 由 假定 ， 和 为 对 车 罕 等身 为 ma， 襄 

忆 有 同一 作 质 ， 因 此 存在 os 阶 正 交 方 阵 Qs 到 


心 
q:BqG'- Ce 中 
_ 
已 ee 让 则 日 为 m 阶 正 交 方 降 , 且 


I, 0 
0 0 
有 R-QP 仍 为 正 交 阵 ， 作 变换 2 一 (Za …， 2Z' 一 尼 革 ， 则 由 
地. 工 .9 易 见 

X' AT=Z'RAR'Z-D 2 


epPaPe'- eP4Pe-(T 中 (1.1.9) 


下 ,4 三 = 2'RAR'Z- 2 


因此 王 '4 生 一 2 2 4ar0 表示 必 有 mza<<m. 依 引 理 1.1.1， 


Z~NOD, 了 J), 5 一 Rg 所 以 交 即 得 出 了 i， 了 , 独立 及 了 so 服从 自 
遇 度 为 全 一 is 的 这 分 布 ， 至 于 44 一 0 ， 可 由 志江. 有 推 
出 ， 因 由 引 .1. 久 显然 
‘RAR (RA,.R") =0, 

由 此 注意 到 瑟 的 正 交 性 , 即 得 看: 和 一 0. 

系 1.1.1. 若 了 =- 甩 '.4, 到 -1 3， 都 服从 好 分 布 ， 这 里 
长 一 (1) 则 了 3 与 Fs 独立 的 充 变 条 忻 为 

A14.=0. 
事实 上 ， 记 骨 = 4 十 册 ，， 了 一 了 ‘A 车 A.A 0, 则 
A AA' AAD = 0 -0, 
因此 由 4 有 扎 ; 的 知 等 性 
奏 ? 一 (二 十 六 2) ?一 上 十 下 3 十 及 1 奸 s 十 及 5 和 
= 十 才 一 及 ;十 村 2 一 和 4. 

即 4 也 为 叶 等 的 ,但 万 -=As 之 0, 故 由 手 质 A 知 了 i, 了 :> 独立 . 
反 过 来 , 若 了 ia, 了 独 空 ， 划 了 = 了 十 Fs 也 服从 六 分 布 ， 注 意 到 
入: 一 及 一 和 >0, 仍 由 福 质 得 出 44s~ 0， 证 毕 . 

值得 注意 的 是 ， 系 二.1.1 的 结论 在 去 掉 “ 了 i, j 一 4, 2 都 服从 
”分布 ”的 假定 时 仍 成 立 。 征明 可 参看 前 面 提 到 的 Plackott 的 
书 . ， 

下 述 性 质 在 统计 上 重 要 应 用 。 


1》 (Cochran 定理 )， 设计 ~N (ag, 卫 )， 3 下 ' 入 , 询 


则 机 对 其 个 Why Gil 4 一 4， 1 避 
下 .4 生 一 荆 ， mm 
相互 独 交 ”的 充 要 条 人 忻 为 


Drk(Ad,) =n, (1 .1.10} 


{=1 
当红 .1.10) 成 立时 ,有 mm 一 xkC40, 部 二 giAia, i 一 1 mm 
证 . 充分 性 . 设 往 .1.1 成立, 记 
FE 有 站 一 TH， 旭 一 让 (有 ，4 一 丰 0 
内 (4 二 mw 知 Qi 可 表 为 
一 训 二 (OX Cr 


的 形状 ， 记 号 土 表示 每 项 的 系数 可 为 1 或 一 IJ， 以 如 记 允 阶 方 
阵 , 其 各 行 问 量 为 
CB 
则 由 红 .1,10) 知 
蛋 ' 硬 = > ,一斑 'B'4BX， 因 而 BAB=T,, 
此 处 本 为 一 n 阶 对 角 阵 ， 其 主 对 角 线 土 元 素 可 为 1 或 一 J， 由 
B'4B- 了 I 知 召 的 行列 式 |B|x*0, 故 4~(B"):B-1-(BB'):>0 
( 因 如 B'> 介 ， 这 说 明 村 的 主 对 角 线 上 元 素 不 取 一 世故 4= 了 、 
因 丽 BB'B=I， 而 召 为 # 阶 正 交 阵 ， 而 表达 式 (1.11) 中 各 项 
系数 必 为 1。 破 若 作 正 痰 变换 Z= (Zi …， 2.)' 一 县 是， 则 2~ 
NE, 1D}, 6=- Ba, 而 


» Tt 


了 1 用 
。 。 . 
(i= > 2 一 二， 的 加 一 由 4 一 全 ,th i=1, "MR, 
p01+ 1 dml 


由 此 推出 ~ 蒿 .5 二 I m9， 其 中 人 部 二 qa' 夺 ,qa( 握 往 质 明 ， 
必要 性 车 Qi ~ Xa “一 工 ， "TE, 贴 许 


恒 ' 于 = (Qt ) + A+ 
应 用 性 质 加 (注意 由 Q~ 愉 4 知 窒 4 之 0) 知 


rk( 三 Ar)+re(An) = n, 
且 于 人 《导入 也 服从 如 分 布 , 雍 玉 用 性 所 访 得 到 
rk( $4) 一 zk( 号 4) 二 rE}, 
继续 下 去 , 最 后 得 到 广 ,1.10) 式 ， 定 理 证 毕 , 
j 设 了 ~NCq，D), 了 满 秩 , 则 
Z= (FT-—a DT- a) ~ 
名 为 闻 的 维 数 . 
证 。 令 寻 = 了 一 qa, 则 于 ~NW(O, DD), 而 
Z= 斑 'D1， 
办 总 为 正定 方 阵 , 存在 满 秩 方 阵 CC, 致 
CDC'=L, 
令 于 -CC 出 古人 以 为 a 维 正 态 , 且 
EW}=CE(X)=0, 
VAR(W) =CVARCYC CDCO'=L, 
故 Wy' 却 ~ 必 ,但 旦 =0C71 卫 , 故 
Z— ED WC+DCAW 
=W'(CDC) -+W- W'W. 
因而 证 明了 所 要 的 结果 ， 
一 般 ， 设 了 ~N(O, 力 ), 我 们 用 上 述 方 法 可 以 得 出 任 一 全 二 
次 型 了 ' 有 了 服从 x2 分 布 的 条 件 ， 实 际 上 ,用 上 述 变 换 得 
Y'AYF~ W'(CA-:0') -1W, 
而 转化 到 多 的 情况 ， 


(四 ) 分 布 

定义 1.1.%. 设 于 ,了 独立 玉 ~ 入 (8 了 ,了 ~y 则 变量 
Z- 工 /W 二 了 了 的 分 布 称 为 自由 度 为 mw 非 中 心 参 数 为 8 的 + 分 
布 , 记 为 Z~ 了 us， 当 5 一 0 时 ,分 布 称 为 中 心 的 , 并 记 为 如 


9 站 。 


下 面 计算 之 一 As 的 密度 范 数 s(xin, 9. 了 的 公布 划 数 记 为 
Sm 0) 为 许 算 se 全 ,可 应 用 商 的 密度 的 公式 . 设 六,，F 
部 立 ,分 别 朋 密度 函数 9902) 和 下 人 (而 五 (入 > 的 一 1 风 训 一 三 7 开 
的 密度 向 分布 玫 数 六 2 和 百 (o 分 别 为 


FD~f gdh, 一 co<e<co， (1.1.12) 
Po =| Gm hd. — oo oo. {1 .1.13Y 


这 里 如 tw) 为 六 的 分 布 函 数 . 就 现在 的 问题 来 说 , 六 ~ 六 16, 1)， 


yz -< 二 oxp( -~ ) 
、 _ 记 - 一 D3 2 . (1,1.14y 


而 由 ~ 工友 由 《1.1.3) 式 出 发 , 不 难 算出 了 的 密度 函数 h(y) 
为 : 上 ( 妨 一 0 当 Wy<0, 而 当 y>0 时， 

hy) 一 or [2 tr (全 一 er (1.1.15) 
以 CI.14)， 巡 .4.1 让 代入 CI.1.19), 逐 项 积分 , 稍 加 整理 即 得 


人 2 EE- 2 


stwln, 6) ~ var(s) ep 


(ti ) Ga: (二 ) . 《1.1.16) 


当 5=0 时 , 得 到 常见 的 所 的 格式 


(二 一) 2 
3 nti 
sa |n) =s(w ln, 0 = 一 人 一 A(1+ 二 ) (1.17) 
一 一 名 人 
下 面 介绍 括 点 和 主 分布 有 关 的 性 质 ， 
| 


® li 


2 - 产 汪 -全 一 ~ Ce AC 
YT) 


%—1 11 
特别 , 当 8=& 时 ,有 如 ~ 机 开 . 
证 . 记 下 = (于 玉 DD'， 设 方 阵 用 由 (LL.1.6) 所 定义 ， 
对 至 施加 变换 了 一 (73, …， 了)' 一 及 是 , 册 我 们 知道 了 …,，Y， 
独立 ,一 人 9 ， b=, + 7, -Mg 而 5 一 b=—0, 


又 了 Yi- VW ,六 (X ,一 于 ): 一 雇 了 3% 故 
Ta 一 vb LN 


Var 1 Er 


右边 一 项 , 分 于 分 母 独立 ,分 母 有 二 二 “1 的 形状 ， 而 分 于 的 


务 布 为 WwW (a 一 Do, DD, 根据 Wp 的 定义 ， 知 Lt 5. 
b) 设 五 1， "ry 如 了 :， ry 工 。 人 全体 独立 ， 天 a”), 
$=1, ,mm, 了 全 oo"), j=L, … 2 则 
Z ~ Vt 2) 于 -Po 


m+ 一 一 人 ds 


VE RP) 


其 中 3 GG 一 5 一 /oc， 特 别 ， 当 o~a-5b 时 ， 有 ~ 
tm 当 oc= 0 时 ， 
B= 


他 一 及 /ec. 
证 . 人 ke， 其 第 一 二 行 分 别 为 


元 区 


TT (Za， se, Tn) = CX, Fi eo YY”, 


则 由 引 理 工 .JI ms 六 ， 和 CB 0 ， 2 1 
名 二 入 其 中 刀 一 VW 如 一 Mb, 而 当 i>3 时 妈 ~0, 又 
2 一 人 王 ， 了 一 vn 了 


而 
ER) + 
- 呈 23+ 袜 Pi (Vm TB (VRP) = 到 好 
Ty 了 
下 oy 3 十 名 (Vr yr )/e 


元 FE 人 Co 


其 中 分 子 分 母 独立 ， 分 母 有 YY-- 于 一 仿 4a-2 的 形状 ， 显 而 易 
见 分 子 的 分 布 为 (于 -a 一 5 一 0)/o, 1)， 根据 tnre-ay 的 
定义 ， 知 Z~ bn a, 8. 
0) 设 豆 一 如 如 YT ~ an. 洲 馈 > 六， 则 五 了. 叉车 151> 
i821, 则 | 竺 | 学 |Y[. 
证 。 车 分 别 以 多 () 和 yg( 雹 记 双 (0, 了 D 的 分 布丁 数 与 /启用 
的 密度 基数 , 则 由 (L.1.18) 得 
Sle |n, 8) -|[ Blt- gd. 
显 热 车 54>>54, 则 更 (zt 一 80 < 全 (wt 一 82)， 由 此 得 出 姬 一 个 结论 ， 


后 一 结论 可 类 侦 地 证 明 ， 只 需 注 音 若 XN (8, DD), i 一 1，2, 
[8 15a|， 则 | 下 1| 沁 | 芝 s|. 


由 设 轩 ,~ 和 sn 一 1, 2 …, 5 固定 ， 则 了 ,一 (6, 了 D)， 
当 n>o0, 

、 、 i 、 

证 ， 由 定义 , 下。 有 下 = 了 /于 加 到 的 形状 ,这 星 2， 

”” 独立 ， Z~Ne, 1), Yi~N 0, 1), t=1, 2， wii 由 大 数 
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工 避 了 厂 (FD) 一 1 (> 表 依 柯 率 收 做 )， 由 此 可 知 当 

yoo 时， ZN C8, 1D). 

特别 , 当 3-0, w=>o0 时 , 各 一 太 (0, 力 ， 这 说 明 当 ww 很 大 
时 ,所 的 分 布 很 接近 克 (0 了， 我 们 将 以 加 (a) 记 由 方程 

SZIm =1—a 
确定 的 2(0<a<1)， 由 性 质 Q 不 难 推出 , 若 以 外 记 由 方程 (2) 
一 J 一 a 确定 的 x,， 则 lim # (0) 一 Zs， 关 于 记号 刀 (0), 还 应 注意; 
PU lh/2)) =o. 


{五 ) 二 分布 
定义 1,1.8， 设 于 ,了 独立 , 了 ~ 后 .3 了 ~ 治 , 则 变量 
1 1 
Z- 工 xX/ 

的 分 布 称 为 自由 诬 为 四 和 (注意 分 子 的 自由 诬 在 前 )， 非 中 心 参 
数 为 5 的 了 分 布 ; 记 汶 ~ 了 ws。 当 一 0 时 分 布 称 为 中 心 的 ， 
并 记 为 Fm 

我 们 用 了 Gm, z 名 和 五 多 |m % 全 记 Ym 的 密度 和 分 
布 联 数 . 当 d=0 时 ， 出 篇 记 为 了 (ee 和， %) 和 Fw|m, 1) - fw|m, 
% 3) 不 难 用 公式 呀 .1.12) 求 出 ， 因为 我 们 已 求 内 了 对 a。 和 发 前 


密度 ,由 此 不 难 写 出 天 和 也 的 密度 ， 代 入 (1.1,12)， 肥 项 积分 ， 
各 加 整理 即 得 


fllm, », 8) =0-*23 [esa 和 wid 
ah od 名 S| 和 ma et 
(1.1.18) 
其 中 
m= 了 ( 雪 (mtn ti) /Ir ( 他 二 )r(3)] ,i=0, 1, 2, 
.1.19) 


二 


当 5-0 计 , 得 到 常见 的 天 ms 密度 公式 
i / 1 A 由 1 1 
i eh) 家- | 
Frm = 人世 一 PR -一 一 一 -一 C1 .4.20) 
”Gr 


人 秆 -1.1 ， 代 以 ， 2 是 当 wz>0 时 有 将 。 当 “<0 时 ， 当 然 有 
了 wjm 和 8 -0 下面 简 陪 地 介绍 几 条 五 耸 布 的 性 质 . 

a 若 2 灿 RI mi5， 

因此 ， 和 着 以 mrto) 记 由 关系 式 了 G1m, 由 一 1 一 & 所 确定 的 
wg 过 外, 则 有 #092)=[Fyn (0] 7 

Db 六 ~ Fn, n,m 1，2, 而 S1> 62, 则 v1 a. 

证 明 与 + 分 市 的 性 质 0) 类 似 ， 因 为 我 们 已 知 , 当 > 和 ;时 
pe 

co) 车 Bz0， 则 Felm mm 加 /1m 加 必 为 < 的 严格 增加 
阔 数 . 


证 明 很 容易 : 直接 算 员 
. I 局 (mtn+ 人 0 | 工 (2 ($) jo A 
rrr (se) 工作 人) 2 
而 当 60 时 ,i 友 在 9>0 处 是 严 赠 的 ， 


d) 设 五 1 Wy mm Y,, 四 Y, 全 恒 独 立 ， Nd, 0 ， 
j=1， "TY, Y,~N, o”), 了 一 圭 ， "和 划 
2 /Pr 


证 明 址 接 由 下 分布 的 定义 及 戏 分 布 的 性 质 中 得 出 . 
6)】 设 下 。~~ 玉 m,n 一 了 2，…， 固定 ; 划 当 5 肘 
XL Xa 
nr 


日 IS» 


证 明 与 t+ 分布 的 性 质 内 完全 相似. 


$1.2. 指数 分 布 族 


接触 过 一 点 统计 知识 欧 人 都 了 解 , 在 初等 统计 中 , 主要 是 讨论 
一 些 具体 分 布 , 特别 是 和 正 态 分 布 有 关 的 统计 问题 。 除 正 态 分 布 
外 ,其 他 象 二 项 分 布 ,，Poisson 分 布 ， 负 指数 分 布 ，Gamma 分 布 等 
等 , 也 占有 重要 地 位 、 这 些 分 布 在 表面 上 站 各 不 一 样 ,其实 可 以 统 
一 在 一 种 包罗 更 广 的 叫做 “指数 分 布 族 “的 模式 中 当然 ,引进 这 
个 分 布 族 的 理由 , 主要 还 不 在 于 谋求 形式 上 的 统一 , 而 在 于 这 种 统 
一 确实 抓 住 了 它们 前 共同 特性 ， 在 以 后 几 章 中 将 看 到 , 不 少 重要 
的 理论 问题 , 在 这 个 分 布 族 中 往往 有 比较 满意 的 解决 ， 因 此 ,在 现 
代 统计 文献 中 , 关于 这 个 分 布 族 的 种 种 统计 问题 研究 很 多 , 积累 了 
很 丰富 的 资料 

本 节 的 目的 是 引进 指数 分 布 族 的 定义 ， 并 证 明 其 几 点 简单 性 
质 ， 其 他 有 关 事 项 将 在 $1.3, $5 14.5 和 81.6 中 提 到 ， 

下 面 我 们 引进 指数 分 布 族 的 一 般 定 义 , 并 举例 加 以 说 明 . 

设 党 为 欧 氏 空间 ; 淄 为 其 Borel 子 集 构成 的 c- 域 ，( 合 ， 宁 ) 
常 称 为 样本 空间 3， 设 天 为 有 上 的 一 个 e- 有 限 测 度 ，{P。 8 EB} 
为 定义 于 雪 上 的 一 族 概率 测度 , 被 测度 所 控制 , 就 是 说 , 对 任何 
E08, 测度 了 对 六 绝对 连续 ， Pp. © 常 称 为 参数 空间 . 由 于 
已 才 凡 及 凡 的 qo- 有 限 性 ，P。s 对 所 有 Radom-Nikodym 导数 ， 记 
为 4 /d= 了 (wv, 办、 了 (zw, 四 常 称 为 分 布 P 对 灸 的 密 庶 酉 
数 . 

定义 1.3.1. 在 上 述 记 号 下 ， 若 存在 自然 数 上 定义 于 于 上 
的 有 限 浓 可 测 函 数 攻 (0)，…， 守 3 (2)， 定 义 于 如 上 的 非 负 纵 - 
可 测 闭 数 %(oy， 以 及 定义 于 妃 上 的 有 限 函 数 O90,， 他 (入 ， 
Qt), EE 

3 一 般 的 样本 字 间 定义 并 不 楼 求 作为 欧 氏 空间 。 见 对 1.4。 特 别 在 此 处 ， 生 可 
以 是 % 维 欧 氏 空 条 的 任 一 个 Borel 子 集 ， 
中 省。 


je W =O Oop BAO TO ND, 12. 
对 任何 65E€8， 则 称 分 布 族 {Ps, 9E9} 为 一 个 指数 分 布 族 . 
显然 ， 必 有 CC0) >>0 对 任何 9E8， 硬 且 ， 上 述 定义 苞 售 了. 
对 任何 09 E90， 
0<| exp[ TOOT haps) < .2.2) 
而 Cg) 则 是 人 .3.2) 中 的 积分 的 倒数 ， 
我 们 来 看 几 个 例子 . 
例 1.3.1， 设 及， 站 独立， EN (oS 一 1)-… 
以 RB, 记 n 维 菊 氏 空间 ， 纺 , 为 玉 中 的 Borel 子 集 构成 的 o- 域 ， 
在 一 CX,, vy 太 让 的 分 布 在 样本 空间 ( 受 ， EB 三 (Ch,, HH,) 上 宰 
成 一 个 硫 率 分 布 庶 , 它 对 定义 于 乡 上 的 Lebesgue 测度 (以 后 简称 
为 石 测度 ) 具 有 密度 


Fw 0) ~ (V3n o) "oxp| — 


这 里 名 一 Kb Wo ， 昌 一 人， ， 参数 空间 为 
=- {0= {4, od): 一 ceo<g<ec 0D<eo2<ccl QL,2.4) 
将 民 ,2.3) 改 写 为 


flg, 四 = [mo re erp[ .5— Sl]. 


-| (1.2.3) 


看 出 这 是 一 个 指数 族 , 其 中 
00) ~ QnoD) sam, 二 的 一 


Tn) = To (8) 一 a hw) =1. 
例 工 .2.3. 下 1，…， 玉 。 狸 立 同 分 布 ， 互 4 服从 Gamma 苍 布 
G(m 纺 ， 即 有 密度 函数 了 全 gpl ( 当 o>0， ao<0 峙 为 0). 


若 记 全 = {= (ea 0 一 1 为 党 上 的 二 
D 曙 热 ;只 要 全 :和风 加 > 站 科 .2. 加 中 的 积分 总 大 于 0 


7 。 


测度 , 则 易 现 环 =( 室 2 …， 王 由 的 分 布 对 比 有 密度 
f(a, 0) -了 exp[ -“ 袜 Xt (6D loge]. (1.2.0) 


这 里 6 二 (4, 及， 参数 空间 为 6- 但 = 他 有 :ae>0 5 中， 由 
(1.2. 合 看 出 这 是 一 个 指数 族 , 其 中 
CC 一 [全 一 一 二 一 


T, (w) - 训 o Ts (0) ~ log h{w) 1, 
例 1.9.8， 二 项 分 布 族 : 五 ~B(n, 办, 即 
.ds -( ?jed-o d= 0, 1 1 th, OO El, 


在 此 样本 空间 多 = {0, 1,,…, 对， 而 因为 和 的 一 切 子 集 构成 的 
c- 域 . 若 取 严 为 计数 测度 ， 邯 对 任何 4 去 罗 定义 jw(4) =4 中 的 
点 数 , 则 易 见 Pe 对 上 有 密度 函数 


fl%, 0) -人 ]”a-0 (1~—0)"exp [evesesl]("), 


(1.2.7) 
参数 空间 为 @@= 仙 :0<8<I}， 于 是 这 构成 一 个 指数 族 , 其 中 


00) = (1 -0)", 90) -logT2 


Tw) -mw h(a) -("} 


有 一 个 细节 应 该 注意 ， 当 写 为 指数 族 扩 .2. 站 的 形状 时 ， 参数 空间 
@ 只 能 为 (0 了 而 不 能 包含 0 和 1 这 两 个 点 ， 但 在 原来 的 二 项 分 
布 中 , 0 一 0 和 1 也 是 许可 的 ， 这 就 是 说 ,为 了 把 二 项 分 布 族 看 作 
为 指数 族 , 必须 御 牲 掉 这 两 个 值 . 
例 14.23.4，Poiason 分 布 族 ， 即 
了 (三 =) =e ?0 /tl, 4=0, 1, 2, -, 00, 

样本 空间 为 咯 一 {0, 1 2,…}, 纵 为 其 一 切 子 集 构成 的 o- 域 ， 取 
点 为 其 上 的 计数 测度 (并 约定 当 万 包 合 无 限 个 点 时 ， 定义 上 td 一 


s B+"， 


co) , 则 易 见 Ps 对 4 有 密度 函数 
fw, 0 一 ore.exp(elog 鳃 让. (1.2.8) 
参数 空间 为 6- [9:0<9<coj、 这 构成 一 个 指数 族 , 其 中 
CO -om 0) = Iogb, Ti le) ~o ho) = 


这 里 也 有 上 一 酌 中 的 情况 ， 为 了 将 Poisson 分 布 族 看 作为 指数 族 ， 
原来 的 参数 许可 值 8=0 必须 放 充 . 

秽 1.2.5. 儿 ={ 一 co， ce) = 及 ， 廊 的 分 布 对 荆 测 度 有 密度 
函数 

fe) OD LB ls, 一 co<o<co ~1<0<1, (1.2.9) 


还 可 以 举 出 很 过 其它 的 例子 , 但 就 从 以 上 诸 鲍 也 可 看 到 , 指数 
分 布 族 确 是 一 个 包罗 其 广 的 分 布 族 , 包含 了 不 少 常见 的 重要 分 布 . 
规 在 我 们 对 定义 1.3- 土 作 两 个 重要 的 注解 . 定义 集合 
而 一 TUGa pp Vr) :0 EB}, 
则 音 中 每 一 点 相应 于 族 中 的 一 个 分 布 ， 在 导 .3. 芒 的 形式 下 ， 它 
是 通过 诸 包办 之 值 来 “ 挑 出 ”一 个 特定 的 分 布 、 但 屋 然 也 可 以 直 
接 从 对 中 去 挑 , 而 不 必 先 选 定 如 有 如 ,再 计算 诸 人 地) 以 得 到 所 中 的 
一 个 点 ， 这 相应 于 把 民 .2.14) 写成 
f(z, WD = O00) exp[ on, 的 a) C2.10) 
的 形状 , 8= (91,…, 80, 而 参数 空间 变 为 上 面 的 虱 ( 当 然 , 这 里 的 
OD 与 (1.3. 了 中 的 CO 也 不 一 样 )， 这 个 形式 特别 重要 ， 值 得 
单独 给 一 个 定义 . 
定义 工 .2.2， 若 指数 族 有 入 .3.40) 的 形状 ， 则 称 它 有 自然 形 
式 . 


为 了 更 好 地 理解 这 里 的 回 题 , 我 们 来 看 例 1.2.8， 由 于 
-fg 7 
当 改 成 自然 形式 


:0<6< 寸 ~ 【一 ce，co) ， 


本 J] 


于 人 的 一 亿 十 eeXpreoy ") {1.2.11) 


后 ,参数 空间 变 为 (一 0， o0)， 耐 OO 由 圭一 凡 " 变 为 C+ 四) 忆 
但 二 者 所 包含 的 东西 完全 一 样 ， 生生 多， 例如 


是 (mn， 计 ) 在 己 .2. 站 之 下 就 取 0- 于， 而 在 革 .2.11) 之 下 应 取 
0~0. 各 果 我 们 杭 要 信 计 丰 功 要 坟 , 风 在 (1.2. 站 之 下 归于 信 计 和 


而 在 民 .2.11) 之 下 ， 问题 则 归于 估计 9 的 画 数 9 (9) 一 了 全 就 


这 个 具体 问题 而 言 , 这 似乎 并 无 好 处 , 但 在 理论 性 的 研究 中 , 自然 
形式 (1.2.10) 有 莫大 的 优越 性 ， 

另 一 个 注解 涉及 参数 空间 的 问题 . 设 指数 族 已 写成 自然 形式 
以 ,2.10) ,定义 集合 


6* = fe :| oxp[ BoeT (8) | hla) du lw) <o0 | (1.2.12) 


根据 定义 1.23,1， 对 参数 空间 如 唯一 的 要 求 是 @cEGr"， 但 较为 自 
热 的 取 法 是 令 8 一 BG". 因此, 我 们 把 @" 称 为 指数 族 的 “自然 参数 
空间 ”， 热 而 , 在 某 些 理论 问题 中 , 需要 把 6° 中 的 某 些 点 排除 在 参 
数 空 间 台 之 外 ， 在 我 们 前 面 所 举 的 几 个 例 中 ， 都 是 取 自 然 参 数 空 
同 . 

自然 参数 空间 有 下 述 重 要 性 质 ， 

引 理工 .2.I， 自 然 参 数 空间 必 是 ;的 同 子 集 . 

证 ， 设 颖 - ( 负 ，p 的 和 二 = 都 属于， 而 
0<e<1l,， 要 证 Y 一 吧 十 任 一 屿 由 也 属于 @fr， 但 


jp[B 8+ Go poT0 ] h(a) 
-| {esp(o Ti oD} 


x {ep( 宫 wT tw) (sw) he dw te), 
用 Hilger 不等式, 海 


» Ds 


J ,exp [S60+ GOOT, 0 Jh (wdn le) 


<( , exp( > Dr ) hr) ds) ) 


x (| exp 人 wT, 办) 人 ) <c。， 
内 而 9E6". 
由 本 可 理 可 知 , 车 @* 在 也 中 有 内 点 , 则 @* 的 全 部 内 点 集 构 
成 BR 的 一 个 西区 域 .特别 , 在 下 =~ 工 的 情况 , 6' 为 一 区 间 ( 有 限 或 
无 上限， 包含 或 不 包含 端点 都 可 能 )， 在 例 1.2.5 中 ，@" 为 开 区 间 
《一 1, 1), 端点 十 工 不 在 其 内 ， 在 理论 狂 问 题 中 , 这 种 端点 往往 是 
引起 麻烦 的 地 方 . 
在 理论 上 常 作 的 另 一 点 简化 是 把 户 (z)“ 豚 收 ” 到 岂 中 ， 具 体 
地 说 ,在 罗 上 定义 测度 
EC ={ hd 4ED. (1.2.18) 
容易 证 明 , 这 样 定义 的 六 为 色 上 的 有 限 测 谊 , 且 显 然 
P(e) /df 00)erxp[ SoT,(%) |. 
这 样 可 以 把 指数 族 的 密 上 度 函数 的 形式 简化 为 
fw, ~0 (0)oxp[ ZO.) jeee. (1.2.14) 
指数 族 具 有 两 个 容易 见 到 的 优良 性质 ， 一 是 集合 {zz 人 
> 全 与 9 无 关 , 我 们 有 有 时 把 这 说 成 分布 族 {P, 96E@B} 有 共同 的 负 
荷 集 ” 或 “共同 支撑 ”, 一 是 它 有 良好 的 分 析 考 质 , 见于 下 面 的 定理 ， 
定理 1.%.1， 设 指数 族 寺 .3.14) 的 参数 空间 有 内 点 如 ,9 (%) 
为 定义 于 % 上 的 可 测 函 数 , 而 积分 


GO ~| soxp [ToT dls) .2.18) 


在 各 的 某 邻 域内 每 点 存在 有 限 . 则 
a) 车 将 由 视 为 复数 二 i 访 , j 一 4, …', 上 则 避 ( 的 作为 个 
复 变数 01, py 的 函数 ,在 区 域 


和 21] 


0 十 让 (二 7) Ep) EL 


(1.2.16) 
内 解析 ， 
hb) 在 0 内 尾 一 点 8 一 81， …, 太 ) 姓 , 任何 形 如 
Br ger Wt Ty m=1, 2, 四 


的 导数 都 可 以 通过 在 积分 导 下 求 导 来 计算 ， 

证 ， 由 于 证 明 较 长 ,分 成 几 段 进行 . 

1. 首先 , 将 9{%) 天 为 加 (2) -49stz)， 看 出 不 妨 设 gy(2) 为 实 
的 .其 次 ,将 J() 表 为 gi ~g"(z) 的 形状 ,其 中 

yo) =max{yty), 0}, 

看 出 不 妨 谈 9 非 负 ， 最 后 ， 将 8 “上 吸收 ”到 吕 中 (类 似 于 
(1L.3.13) 的 艇 法 ), 看 出 不 妨 设 y(2) 一 i. 

2 其 次 ， 需要 指出 ， 由 于 对 任何 实数 & 有 ]e*|=1i, (的 作 
为 复 变 数 思 ,，…, 甸 的 函数 , 在 区 域 珀 " 内 存在 有 限 ， 现 证 它 在 区 
内 连续 ， 在 Ur 内 任 取 点 广 : (一 条 十 im1， 了 一 了 
ED 找 4 汪 0 充分 小 ,至 

D={(t, Sy Ci): (6 — la, 了 一 十 ry oD. 

因为 当 3, vg z 为 任何 实数 ， 2 二 yz 时 ， 必 有 5 帮 后 十 所 可 
知 对 任何 日 一 过 十 imz 三 十 加 ， 只 要 (志和 ED, 必 有 


oxp [Gtin) TD || <Zorp[B 的 + | .2.17) 
在 每 个 如 十 4 中 ,2 和 一 4 都 购 取 到 ， 故 和 中 一 共有 路 项 ， 根 据 
假定 , (1.2.17) 右边 对 在 绑 上 可 积 , 而 exp[ 之 19;(%) | 为 8 的 


连续 函数 .由 控制 收 襄 定 理 即 得 当 姑 > 六 时 , GC 一 G8, 这 证 
更 了 好 的 连续 性 . 

3， 因此 , 为 了 证 明 忆 的 解析 人性， 只 需 对 每 个 久 有 导数 即 可 . 
因此 ， 如 能 证 明定 理 的 5， 则 这 一 点 也 证 明了 .。 现在 我 们 来 证 明 ， 


4 人 在 如 处 之 值 可 通过 在 积分 号 下 求 导 得 到 。 为 此 ， 令 


和 


Eexp[ SD E+ Tm) | -$0), 
财 如 上 面 雇 指 出 的 
| eta 四] 


Foxp[ (EDT OG Dd) <co， (1.2.18) 
Ea 
19 一 好 (9 | 
di— Ht 


<|. 
-| 


利用 初等 不 等 式 {a, 2 为 任 可 入 村 


一 Gis! 5 
| 到 1 i 1 Coon)8, WB |z| 去， 


i 易 见 对 |91 一 91|<< 生 =6， 有 
pL ei1 | jexp (FT (0) ) | 


< 放 {exp[ (Ei + OT (a FexpLtei— T(r)]} 


porTs (o) 是 全 (20) | oa)an 人) 


exPT[( 由 一 pp 二 


工 || exp [Tt 2) ]| 由 人 GZ) ， 
(1.2.19) 


< {exp[ Et + a Ts (v1 texrpL Et — DL} (1.2.20) 


由 (2.18) 一 (1.2.20) 知 ， 在 计算 lm 一 时 (注意 


= (站 等 于 说 负 一 页 )， 地 在 了 分 号 下 取 极 腿 ， 
让 此 得 到 


6 (全 _ | im STP OT (0)) exp HT DD) 
BO #0 Ci D, 一 全 


-erp| SI GLCe) ja 人) 
-| yr) oxp[ > OT, C0) dp {wy). (1 .2.21) 


[上 


最 后 , 注意 到 2 名- 2 仍 为 .2. 1.) 开 的 和 人 所 以 , 上 面 的 
讨论 可 用 于 它 ,这样 我 们 又 得 到 例如 ，- 本 可 通过 在 积分 号 


下 求 导 算出 ， 循 此 以 往 就 证 明了 8。 定理 证 毕 . 

从 这 个 定理 可 得 到 下 面 的 推论 . 

系 1.2.1, 以 Bo 记 自 然 参数 空间 的 内 点 集 ， 则 表达 式 
各 .2.10) 中 的 OW 在 6B。 上 解析 ， 其 对 各 饭 的 偏 导数 可 通过 在 
积分 号 下 求 导 算出 。 

系 工 2.2. 若 9EBo, 则 在 分 布 PP 之 下 , 27 (中 的 各 阶 矩 都 存 
在 有 限 , 且 可 通过 在 积分 号 下 求 导 算出 . 

例如 , 从 关系 式 


1 上 
0 -| oxp| BE OAT (0) Jap ©) 
出 发 , 两边 对 鱼 求 导 , 得 
一 Cr 从 2 - | 了 (2Jexp be 人 ja fo) ， 
即 BR) ~ gy log OC) 


类 似 地 得 到 


Cov (P(X), TAX)) = 2. 


等 等 ， 应 当 注 意 的 是 , 若 6 为 自然 参数 空间 的 边界 点 ， 则 T,X) 
在 分 布 P, 下 的 是 不 必 存 在 (习题 1 四 . 

在 $1.8 和 名 1.6 及 以 后 诸 章 我 们 将 看 到 ， 在 讨论 种 种 理论 间 
题 时 ， 指 数 族 (1.2.10) 的 形式 还 可 以 简化 ， 即 我 们 可 以 只 考虑 
人 po Yo) 而 不 放 从 原来 的 样本 出 发 ， 这 可 以 把 


exp[ 窟 oT, (%) | 


简化 为 ezp( gm) 的 形状 ， 考虑 到 这 一 点 ， 上 述 关于 Ty(X) 的 
甜 的 存在 , 是 一 有 用 的 性 质 ， 
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$1.3， 条 件 期 望 和 条 件 概率 


条 件 期 望 和 条 件 概率 的 理论 对 数理 统计 有 重要 的 意义 ， 本 节 
以 适合 于 统计 的 需要 的 形式 , 介绍 这 个 理论 的 一 些 基本 事实 ， 这 
此 内 容 邦 是 学 习 数理 统计 基础 的 人 所 必须 掌握 的 ， 


(一 ) 关 于 可 得 变换 的 两 个 预备 定理 


为 了 给 条 性 期 望 下 一 个 一 般 的 严格 定义 ， 需 要 做 一 些 准 备 工 
作 . 

设 多 为 一 抽象 空间 ,就 是 说 , 它 是 一 个 非 空 集合 .而 乡 是 党 
的 某 些 子 集 所 成 的 o- 域 ( 信 ， 纺 ), 称 为 一 "可 测 空 间 ”、 在 统计 上 ， 
可 测 空 间 常 以 样本 空间 的 形式 出 现 ， 所 以 有 时 这 祥 一 个 对 了 于 (好 ， 
劣 ) 也 称 为 样本 空间 . 在 谈 到 可 测 空 间或 样本 空间 时 ， 总 是 假定 
芝 后 声 ， 中 全 空间 受 是 多 的 一 个 成 员 多 中 的 集合 常 称 为 可 测 
集 ， 或 更 确定 地 ， 称 为 级 可 测 集 ， 训 测 空间 最 重要 的 例子 就 是 
Ga ， 纪 ,此 外 及 以 后 , 在 天 其 它 指 定时 ， 益 是 以 BB 记 严 维 欧 氏 
空间 , 多 记 其 中 的 Borel 集 构成 的 c- 域 . 

现 设 ( 综 ， 用 四 和 《多 ， 绕 5) 为 两 个 可 测 空间 fo) 定义 于 色 
上 .取舍 于 区 内 .t) 称 为 一 个 (由 从 到 多 的) 变换 若 

人 Hy) = (Rs, Br), 
特别 在 %=1 的 场合 , 则 常 称 #(%) 为 鲨 数 ， 保 没有 必要 在 任何 时 候 
都 坚持 这 个 名 称 上 的 差别 ， 设 #5) 为 一 个 变换 , 4 和 也 分 别 为 稳 
和 .多 的 子 集 (不 必 可 测 ), 则 集合 全 : zE 有 8 to) E 1 称 为 旦 的 
原 和 象 ， 记 为 所 人)， 而 集合 位 (2)，z 扎 4} 则 称 为 4 的 象 ， 记 为 
4). 设 多 为 的 某 些 子 集 构成 的 集 类 ， 则 集 类 位 71(B)， 
如 E21} 常 记 为 太 (8H )， 关 于 原 象 ,很 容易 证 明 以 下 一 些 事实 ; 
PNB =6=> 110B) 门 #1 CBs) 一 站 
名表 空 集 ，a=>8 总 表示 由 前 提 a 能 推出 结论 名 ， 
a BD, 2 ) eBD), 


a 5 


光 为 c- 域 宝 志 过) 为 or 域 等 等 . 
设 引 2 为 由 (全 ， 圾 四 到 (7 ， 妥 的 变换 ,如 果 
BE 1B) EVs, 

手 称 #(w) 为 一 可 浏 变换 {或 孟 数 )， 这 个 条 件 等 价 于 扩 ( 故 2) 己 
学 z. 值得 注意 的 是 , 在 谈 到 可 测 变 换 时 , 必须 提 到 澡 s 和 多 才 有 
确定 的 含义 .在 多 w 和 绍 ; 已 有 指定 或 成 的 时 ， 也 可 简称 to) 为 
中 到 89 的 可 测 变 换 、 特 别 ， 若 夫 的 在 王 , 中 取 值 ， 则 霓 > 总 到 为 
,这 时 就 直 说 函数 i 为 绍 s 一 可 漳 , 而 在 及 已 明确 的 情况 下 ， 
可 直 说 #2%) 为 可 油 ， 

设 (0) 为 由 (全 ， 煞 0) 到 (了 了 , 绪 y) 的 可 测 变 换 , jp 为 史上 的 一 
个 测度 .在 绣 : 上 定义 集 函 数 u* 如 于 . 

设 吾 E 鹏 。， 定 义 让 (B) 一 ptt"1(B)).， 不 难 证 明 卢 为 办 上 
的 一 个 测度 , 这 个 测度 称 为 点 的 “导出 测度 ”更 确切 地 ,是 上 5 通过 
变换 i[w) 而 在 绕 z 上 导出 的 测度 , 有 时 也 用 jo' 来 记 rr， 注意 志和 
ii 是 定义 在 不 局 的 ec- 域 上 . 

有 了 上 面 的 准备 后 , 我 们 来 证 明 两 条 重要 引 理 . 

引 理 1.8.1. 设 厅 0) 为 (全,， 事 0) 到 (FF， 汝 r) 的 可 浏 变换 ， 则 

8， 若 #0 为 定义 在 上 的 取 值 于 孔 的 可 测 函 数 ， 则 出 关 
系 式 Fo 一 BE 而 定 义 于 到 上 的 函数 ya) 也 是 可 测 的 ， 

b, 记 坟 一 入 1( 名 rz) 。， 若 了 tw) 为 定义 于 有 上 取 慎 于 珊 的 
0 可 测 函 数 ， 则 必 存 在 定义 于 .上 的 稚 一 可 测 栈 数 89 人， 殖 
(om = 对 -- 切 zE 呈 

证 。 4 是 显然 的 ， 因 背 CE 统 而 了 DB=9 1(O)， 山 易 见 

F100) = 0D)., 
因为 DE 名 sy, 有 六 10) E38,. 

P 的 证 明 较 为 复杂 。 先 引进 一 个 记号 . 设 4 为 他 任 一 于 集 ， 
则 函数 

1， 当 zzE€4, 
7 -{o 当 wE9 一 有 4， 
称 为 4 的 指 未 函数 并 记 为 五) ， 最 然 ， 若 内 为 允 ' 的 子 集 构成 


和 和 


OO Oo i 


的 任 一 个 o- 域 ， 则 Jz) 为 多 -可 测 函数 的 充 要 条 件 为 4 为 绍 - 
可 测 集 , 即 4E 多 ， 又 我 们 称 只 了 到 有 限 个 有 限 值 的 可 测 函 数 为 “ 简 
单 可 测 函 数 ”， 显 然 , F (e) 为 简单 可 测 函 数 的 充 要 条 件 是 : 存在 有 
限 个 两 内 无 公共 点 的 乡 - 可 济 集 44,…，4w 致 | 4 一 名， 及 有 
限 常 数 6 …， Gx， 致 

f (0) =os(®, (1.8.1) 


更 人 尾 取 <4€, 则 到 人) 满足 的 站 论 , 因 六 既然 45 和 06, 必 
存在 BESr, 致 4= 太 1 有， 了 可 9 的 一 和 二 ， 则 显然 有 了 4 一 
#0)) 对 -一切 =E 到 由 币 .3.3 不 难看 出 ， 对 任何 简单 声 - 可 
测 的 了 (o) ,天 的 结论 也 成 立 . 

一 项 设 关 Go 为 任 一 非 负 编 - 可 测 函 数 ， 由 测度 论 可 知 ， 存在 一 
申 非 降 非 负 简 单 8o- 可 测 函 数 {f 《22)}, 致 im f(z) = 下 (zw) 对 一 
切 zx 和 区 ，、 吉 上 所 证 ,对 每 个 mu 存在 入 -可 测 的 加 的 , 致 户 (o) = 
外 207， 涛 砌 序列 {yn 中}. 记 CO= 信 ED, IT gn () 存在} ( 极 
限 可 为 co， 由 测度 论 知 C 所 多， 且 若 令 

lim ga (Hd, EO 
LA -| "™ 
0, 当 iE FO 
则 gg 从 为 绍 一 可 测 ， 易 见 了 2) = 了 直 ( 罗 7 对 一 切 上 E 有 8 因为 ,由 
加 (四 的 作法 , 知 所 9) 一 gn GD)) 对 一 切 m， 但 当 和 >co 时 下.(2) 
有 极限 子 (2%), 而 gn tw)) 也 有 概 限 ， 而 依 全 芍 定 义 , 吡 极限 就 
是 8GGe))， 故 了 Ge) 一 g (i092)), 
最 后 , 任 一 缩 e- 可 浏 的 了 lw) 可 表 为 两 个 非 负 胃 0- 可 测 函 数 之 
莽 ， 了 (@) 一 址 (0) 一 fo(0)， 由 已 证 部 分 知 存在 绍 一 可 测 的 gu 中， 
gD , 致 f(z2) = g(t 8) ), 二 1 ,23, 定 光 
7 四 二 | 一 丰 ( 介 ， 若 天 人 一 93() 有 意义 ， 
0, 车 的 一 go 地 无 意义 ， 
则 显然 9 中 为 豚 一 可 测 且 了 =9GC0)) 对 一 切 4 人， 引 理 证 
毕 . 


引 理 1.8.2. 设 i(2) 为 【全 ， 轨 wm 到 47， 用 的 可 测 变换 , 只 
为 多 上 的 测度 ,js" 为 其 导出 测度 ， 则 对 任何 罗 r 可 浏 函数 9 多 
及 五 E 妥 ww 有 ? 


fi 9 G0) dn Ce) -| ,sDaw tw. (1.3.2) 


证 。 不 失 普 凯 性 可 设 B=-F (只 需 定义 9 的 一 g 仿 , 当 tEBB 
而 在 .~B 上 为 由 ,这 时 以 .3. 办 成 为 


| .sean = ,sg Da. (48. 


显然， 若 yg 中 一 IQ)， BE 妇 s, 则 届 .3. 引 由 wr 的 定义 是 成 
立 的 .于 是 对 y( 介 为 非 负 伴音 鹏 一 可 测 时 成 立 , 从 而 推 到 y 的 为 
非 负 雳 一 可 测 及 任何 均 一 可 测 函 数 的 情况 . 

在 结束 这 一 段 以 前 ， 有 一 个 细节 值得 一 提 ， 前 面 我 们 谈 到 
地 ， 静 四 到 ( 怠 ， 肠 ) 的 可 测 函 数 ， 由 于 瑟 : 不 包括 +eo 和 一 co， 
这 个 提 法 把 可 测 函 数 限制 为 有 限 的 ， 而 在 实 变 函 数论 中 ， 可 测 函 
数 的 定义 并 不 要 求 函 数 有 报 ， 对 此 只 需 作 如 下 的 改变 , 定义 空间 
瑟 ， 它 由 有 瑟 加 上 oo 和 一 oo 组 成 ， 在 其 中 定义 o- 域 名 : 太 中 
任 一 集 或 属于 缠 ， 或 由 某 个 4E 绍 ! 再 吉 上 ee 和 一 oo 中 的 任 一 
点 或 两 点 构成 , 然后 把 地。 可 测 函 数 了 解 为 ( 受 ， 鹏 。) 到 (六 节 ) 
的 可 测 变换 .我 们 以 后 仍 使 用 记号 (BR:， 细 0 ， 但 在 提 到 可 测 函 数 
时 ,是 从 刚才 解释 的 意义 上 去 理解 的 . 


(二 ) 条 忻 期 望 的 定义 


这 些 概念 的 最 简单 的 情况 在 初等 概率 论 中 已 有 所 讨论 .分析 
一 下 这 些 简单 情况 , 可 以 看 出 推广 到 一 般 情 况 的 途径 , 并 使 这 一 较 
为 抽象 的 概念 的 直观 背景 变 得 比较 清楚 ， 
例 1.3.1. 设 互 , 了 为 离散 型 变量 , 分 布 为 
二 (下 一 0 =p., PA =0) 一 六 
P(X=m, F=B) = py by j=1, 了 


DD 更 确切 地 说 , 若 忆 .8. 归 的 芷 一 边 有 娩 义 , 则 另 一 边 也 有 意义 , 且 二 者 相等 。 
+ 28 。 


则 (一刀 | 于 一 gD 一 pw/pi， 由 此 可 知 ， 在 给 定 互 =w 的 条 件 
下 ,了 的 条 件 期 望 (条 件 平均 ) 为 
EIX~00 -BE bp/pes i-l, 2,%. 3 
若 定义 了 (0) 一 加 (YY| 开 一 示 ， 则 六 (四 为 定义 在 六 的 样本 空间 
fa as,，…} 上 的 函数 ， 当 然 ， 也 可 以 看 作 是 (了, 了 ) 的 样本 空 
间 { Ca, D7, 多 j=1, 2, “ 上 的 函数 . 如 果 求 这 个 消 数 在 {m1 
2, … 寺 的 任 一 子 集 {cu， th }， 或 者 说 ， 在 研 [a， bn, 人 了 一 二 
2， 和 的 子 集 《as Bi ， 1=14, 2， "yy =1， 2， 小 上 的 概 学 平 
均 , 则 将 有 
> Pu J (qe) /¥ 2. 一 允 训 OP /3 Px. 
但 上 式 有 边 不 是 别 的 , 正 是 了 在 集合 {(aw， 80 : 了 一 1, 2,…, 一 
1, 2,.…} 上 直接 算出 的 概率 平均 ， 这 个 性 质 是 由 代 .3.4) 所 定义 
的 条 件 期 望 函数 的 特征 性 质 . 它 可 解释 为 ,对 了 在 集合 { (0%, by)， 
放大 -二 2 -上 求 福 率 乎 均 可 以 分 两 步 走 ; 先 固定 了 之 值 m 求 
了 的 (条件) 概率 平均 , 然后 对 后 者 在 {6 7 二 1，2,…} 上 求 概率 
平均 . 
例 1.3.2. 设 陡 ,六 为 连续 型 变量 , 有, 了 和 (下 ,了 ) 的 密 座 
(对 工 测度 ) 分 别 为 广 (O， 所 ( 护 和 了 lo) 驴 ， 则 在 给 定 五 一 4 的 
条 件 下 ， 并 的 条 件 密度 为 了 G@ [四 一 -好 名 各 帮 在 给 定 及 一 2 时 
y 的 条 件 期 望 为 
gO -EFIX-o~ | ve, Way/fi(O. (3.0 
车 把 y (2) 在 集合 {fz; =E A} 上 求 概率 平均 , 则 将 得 


(WT NAOT IARAOL 


-| | ore Wavav /| foar. 


请 上 式 右边 则 是 工 在 集合 fr 殷 : 5E 4 一 co<9y<oo} 上 直接 
算 当 前 概率 平均 因此, 由 址 .3 ,名 定义 的 条 件 期 望 函 数 仍 具 有 上 


#2 


例 的 性 质 . 
以 分 析 以 上 两 个 简单 情况 所 发 现 的 共同 性 质 ， 就 瞩 为 条 件 期 


望 的 一 般 定义 的 基础 

设 (25 8s, 卫 ) 为 一 概率 空间 ,就 是 说 , 了 为 8 上 的 一 个 要 
率 测度 , 了 (2) 为 定义 于 和 的 绍 。- 可 测 函 数 , 且 

Bf (0)) | fo)dP (le) 
存在 有 限 ， 闵 设 (3 ， 江 ”为 一 可 测 空 间 ，#o) 为 多 到 .9 的 可 测 
变换 、 我 们 想 要 定义 在 tla) = 如 GoE .) 的 条 件 下 (的 条 作 基 
望 ， 若 记 ifio}) = 4o， 则 从 直观 上 说 , 这 条 件 期 望 应 当 为 
[Ff WAP /PA ~g 6). 

但 一 般 说 来 有 卫 (4;,) 一 0, 所 以 这 个 作法 没有 意义 ， 因 此 ,我 们 不 
能 在 一 般 场 合 下 给 出 9Cio) 一 五 (7(o) | 一 所 ) 的 构造 性 定义 ， 而 只 
能 按 上 面 两 个 例子 中 显示 的 性 质 ， 对 gCto) 作为 如 的 函数 提出 一 
定 的 要 求 ， 这 个 要 求 就 是 “一 步 平均 等 于 两 步 平均 ”, 这 样 得 到 如 


下 的 定义 . 
定义 1.8,1. 在 上 述 假定 和 记号 下 ,车 y( 只 为 一 级 一 可 测 函 


数 ,满足 条 件 , 

ff WaP (wo =f gap (), 对 任何 BE (1.3.6) 
这 里 PP 为 卫 的 导出 测度 (显然 它 也 是 梳 率 测度 )， 则 称 7 的， 或 
9G 人)， 为 了 CE) 对 二 的 条 件 期 望 , 记 为 至 (7(z) 有. 

对 这 个 定义 我 们 提出 以 下 几 点 注意 , 

1 午 引 理 1.3.2，(1.3.6) 可 写 为 等 价 的 形式 

Jf aP® -| gl) dP 对 任何 4E#1 (8,), 

(1.,3.7) 

2. 适合 条 件 (1.8.6) 的 g 必 存在 ， 为 了 证 明 这 一 点 , 我 们 在 

扩 一 i"! (8 上 定义 集 函 数 
» 0 =~] fdP ,AEB 
= 30 。 


1 -ne 下 


由 对 子 的 假定 知 这 是 一 有 限 的 集 丽 数 ， 且 显然 "> 们 已 ， 出 于 卫 为 
有 限 测度 , 由 Radom-Nikodym 定理 知 存在 %0- 可 测 的 fotw)， 致 


(全 一 | fo aP as) 对 任何 4E 纺 . 


由 引 理 .3.1 知 存在 坟 一 可 测 的 y( 圾 ， 致 fo(%) =g(t()) 对 一 切 
如 人， 再 由 引 理 1.8.23 知 


[fol eaPG =| 9aP(D), BEY,, 4 二 (本 


因此 y 人 满 足 过 .3. 的 ， 

3. 我 们 没有 说 适合 条 件 民 .3.6) 的 yD 唯一 ， 但 显然 ， 车 
及 (从 和 团 二 都 满足 .3. 昌 ， 则 必 有 有 天狗 人头 四 二 用 一 中 
或 者 说 也 ({z: gz (i(2)) 六 4a))}) 一 0 所 以 条 件 期 望 9 二 是 
“志平 处 处 唯一 ”的 . 

最 后 , 不 应 忘记 条 件 期 望 9( 有 本质 上 就 是 


BC) ED = | fAIP (0) PC 4 二 (全 )， 


这 虽 不 能 作为 条 件 期 望 的 定义 也 不 能 用 于 奸 论 推导 ， 但 在 理解 一 
些 涉 及 条 件 概率 的 问题 时 是 有 益 的 ， 

下 面 我 们 要 讨论 一 个 重要 的 例子 ， 为 此 先 引 进 几 个 有 关 的 记 
号 和 概念 . 

设 了 (tn) 为 定义 于 RB, 上 的 实 函 数 、 了 称 为 对 称 的 , 若 
对 任何 (wo …， 0) 及 夺 2 加 的 任 一 置换 人 il, 语 ,…'， in), 有 
为 对 称 Borel 
集 , 著 4&E Lo， 且 对 任何 (W172) 所 A 及 置换 tH， …, bi)， 有 
《za go 三 4 一切 对 称 Borel 集 类 多 显然 构成 o- 域 , 定义 
于 RR 上 的 实 函 数 了 为 级 可 测 的 充 要 条 件 是 它 为 鹏 ,- 可 测 且 对 
称 ， 对 任何 (wy za 2) 和 本， Gd D Wo) 记 2 
2 en 出 小 到 大 的 排列 ， 设 和 ，…， 证 为 二 …， 号 的 任 一 去 
换 , 对 任何 有 4 己 有 B， 以 A446, …, 记 集 合 

{ny rs Wa) Cm tn) EEA}. 

定义 在 物 上 的 济 府 名称 为 对 称 的， 车 对 坊 ，…, 中 的 任 一 置换 及 


pr Bi 


本 EE 有 (As) = (A). 
例 1.3.3. 设 ( 好 有 ws， 号 为 概率 空间 , 于 一 启 ， 各 p= 多 ,而 
了 次 对 称 的 ， 定 头 可 浏 空间 ( 儿 ， 7) ‘FZ= {mh ry wn) : (er, 机 
va) 为 的 一 切 Borel 子 集 构成 的 
0- 域 ， 定 义 
Em) Fp, ey mn) gy, 7 em)) 
显然 , 门 ( 帮 7) 一 绍 'C 纺 ，- + 为 可 浏 变 换 。， 要 求 BC(FC(X) 夫 ， 
此 处 了 为 到 可 测 有 [了 (w)dP (w) 存在 有 限 ， 
考虑 
fo =folew 7 on) ~ EF oes oo 1 oo) EB 
(1.3.8) 


求 和 的 范围 对 习 ， ”9 0 的 一 切 置 换 ， 故 和 中 一 共有 #1 项 . 量 然 ， 
万 对 称 且 经- 可 测 ， 故 为 绕 s 可 测 . 又 由 卫 的 对 称 性 知 ， 对 性 何 
4 后 引入 有 


ff map | Fe maP 
对 代 ， my 加 的 任 一 置换 (41, "Ty 名 ， 从 而 
[ap-| fdap, 对 任何 4AE;。 (1.8.9) 


由 克 :( 纺 0) 一 雪 ;， 用 引 理 1.3.1， 知 存在 雪 /可 测 的 yg 人 ， 玛 
gg 人) 一 (0@) 对 一 切 2EB， 所 以 由 (1.8.9) 


| .faP-| ve)aP， 对 任何 4E222. 
因而 马 .3. 刀 满足 ,这样 证 明了 
再 (7 (四 一 9 的 ， 其 中 gG 从 ) -fol). C1.3.10) 
(三 》 条 件 期 望 的 性 质 


我 们 约定 ， 当 某 一 事实 对 除 一 产 测度 为 0 的 集 以 外 的 点 都 成 
立时 , 记 为 (a. e. 由 


"Is 


设 ( 爸 ， 角 sw， 四) 为 梳 率 空间 ,KG ， 肖 四 为 可 测 空间 , @) 为 党 
到 .9 的 可 测 变换 ， 又 以 下 提 到 的 函数 户 疡 , 及, fs,，… 都 定义 于 


4 上, 且 | Fa)aP 等 等 都 存在 有 限 ,又 以 P' 记 的 导出 测度 。 


a .了 四 Oa. 8. PyBCF(T) DFO (a.0. PY, 
记名 SS AOLCH IA. 
RFE EEFAL)ID Ca.0. PY. 
b。 对 任何 有 限 常数 6， …, o,。 有 


到 (加 oj) D2 oF ER)ID (a. 0. P"). 


0. 车 gD= 了 BFC) | 办 ,到 ECF(I)) ~ Blg((£))). 
这 三 条 性 质 很 容易 证 明 ， 留 给 读者 作为 练习 ， 性 质 o 体 现 了 求 
也 (FS) 分 两 步 走 ” 的 思想 , 是 一 个 很 有 用 的 性 质 ， 

上 4 【条 件 期 课 的 单调 收 伍 定理 )、 设 

Of 0 f(D Sf) Es) .0. P), 
.3.11) 

则 Bf XK) D>EFR)ND (a.6. PY). 

证 . 由 假定 民 .83.11) 及 性 质 a 知 0cg0 所 go0 拒 … (a. 9， 
9 此 处 g( 人 一 也 (F(T). 记 了 人 乓 一 lim g,( 信 , 则 由 积分 论 


中 的 单调 收 僵 定 理 知 对 任何 BE 绍 ; 有 
fs WaP" 0 ~ tm],g,(aP' 


me lim a f» Cw) aP Cw) = | i Cw) 好 五 (wy) , 


从 而 证 明了 g 信 一 CFC) |D. 
e. 《条 件 期 望 的 Eatou 引 理 )。 设 
六 全 鸭 (a.8. 了 Py 对 任 合 n=1, 2 …， (1.38.12) 
而 记 了 (%) —liminf f»(%), 则 
EU I <lim inf B(f.(X) | 及 但 .6 PV, (1.3.18) 
有 车 万 人 < (a. 8, ), 对 任何 %=1， 2, mp 而 记 


Bm. 


(mm 一 lim sup fa (mn), 
山 
E(fF(R) D> limsup B (fs(X) I) (a.8. PY). (1.8,14) 


证 设 (1.8.1 罗 成 立 ， 先 考 呀 了 (2) 三 0 的 情况 , 记 
Bhat) = Inf {fn lt), frril®t), } n=1, 2, *, 
出 Oh h(n Ef la. 6. PD), 
且 hf) Ge P) 
对 任何 % 用 性 质 a, 9, 知 
lm inf B (F(X) ID >lim Bh,(X) 上 


-BF (a.0.P). 
当下 (0) 去 0 时 ,只 需 基 序列 { 户 } 一 {一 入 代 兰 {f} 即 可 ， 这 证 明 
了 (4.3.18)， 对 序列 {f 一 下 } 应 用 .3.18) 即 可 得 到 (1.3.14)， 
f. 《条 件 期 望 的 控制 收效 定理 )， 设 | | 所 产 (2) 且 
lim 所 人 一 (人 .se. P), 
由 
lm BH(FAXINO) BFC I) Ca. 6. P), (1.3.15) 
这 个 性 质 显然 是 。 的 推论 . 
g. 设 Fo) 为 多 -可 测 , AD) 为 绷 可 测 ， 且 避 (F(w)) 和 
忆 人 人 G(Z))F(Z)) 都 存在 有 限 , 则 
BXIFX) ID 
=h 人 DEFOEIND (a. 6. PY. (1.8.10) 
证 。 由 于 .3.16) 右边 为 他 ,可 测 , 要 证 导 .3.16)， 具 需 验 
证 


fp G0) FdaP Co) ={ hg DaP' WD), (1.3.17) 
对 任何 BEB,， 此 处 g 从 一 如 (F(Z)| 及 ， 我 们 注意 ， 由 假定 
zxG@)7(oDaPO) 存在 有 限 , 依 引 理 1.3.2 知 ， 


J, a9 Dar 


9 由 和 


a 


征 企 有 限 ， 

容易 验证 ; 若 克 鸭 = 天 全 ,CE 中。 则 导 .3.1 中 对 任何 记 E 3， 
成 立 ( 此 归 针 为 y 的 的 定义 )， 因 此 ,对 8 人 为 任何 简单 用 r- 可 测 
卫 数 入 Ep，(1.3.17) 成立， 现 设 为 (} 满足 假定 中 的 要 求 ， 作 
一 中 简单 多 ;可 浏 画 数 生 ,从 }, 敏 

(BD | Sh, lim 和 的 一 GD ， 任何 5 
虽 有 
DJFGOGP (0) —[ hn (Dg WA Dd. (1.3.18) 

出 于 如 (0)f(0) 和 加 (Dg 的 分 别 被 可 积 隐 数 1 有 Gm) Go) | 和 
gD | 六 控制 ;在 并 .3.18) 中 令 % 一 oo 即 得 企 .8.17). 

性 质 g 的 直观 意义 是 明显 的 : 由 于 # 已 固定 , 在 求 上 (全 (2) 
的 条 件 期 户 时 , 天 人 仿 可 以 作为 一 个 常数 提出 来 . 


《四 ”条 人 性 概率 
考虑 概率 空间 (人 2 光 z， 古 ) 和 可 测 空 间 ( 人 7 供 D) 1(D) 为 分 
到 多 的 可 得 变 换 ，P" 为 芋 的 导出 测度 ， 对 任何 4E 鹤 。, 定 六 
PAID = BO ID. (1.8.19) 
并 称 汶 A4( 在 结 定 # 之 下 ) 的 条 忻 概 率 . 它 显 然 是 存在 的 . (1 .8.19) 
可 二 为 
PNE(B)) -| PC4IDaP" 人 的， 对 任何 卫 E 纵 v 
由 于 条 忻 概 举 是 条 件 期 望 的 特 便 ， 它 的 性 质 可 以 由 条 件 期 户 
的 性 质 挫 得， 我 们 列举 如 下 : 
a PA'N20 (ae PP), 
ACBEPIAID EP(BID (a. 8. P'), 
b. 若 41，4s, … 两 两 无 公共 点 , 则 
PAJAND -=P (a. 8. PP) 
f 1 


co. 车 lim 4s=4, 网 lmPCA OD =PAID 但, 9. 五 


CE 


(五 正则 条 件 概 率 函 数 的 定义 和 存在 定理 


从 条 件 概 率 的 性 质 b 看 到 ， 它 有 类 似 于 通常 的 概率 测度 的 性 
质 . 但 应 注意 在 此 有 一 显著 的 不 同 点 : PUA4D = PD 


是 (2. e. 了 成 立 ， 因 此 ， 如果 随 偿 拿 出 一 组 41，.4s，*… (都 属于 
绍 w 且 两 两 无 公共 点 ) 及 刀 E 了 TDP， 那么 我 们 并 不 能 保证 
PO Alio) = PN) 


一 定 成 立 ， 因 为 ， 笑 然 POAID 一 PC4 办 只 是 @- 6. 了 中 成 


立 ， 存 在 一 个 集 BE 纪 ,，Pr(B) 一 0， 使 当 1EB 时 上 述 关系 不 成 
立 , 而 所 给 的 如 可 能 正好 落 在 互 内 . 

但 是 ， 由 条 件 硫 率 的 定义 知道 ， 它 只 确定 到 (人 a. @- PY, 故 有 
一 定 的 选择 余地 .， 因 此 我 们 自然 地 提出 问题 ， 能 否 适当 地 选择 
PC4| 有 D, 使 (四 ) 的 人 性质 b 对 一 切 的 {41} (都 属于 绍 sz 且 两 两 无 公 
共 点 ) 及 teET 都 成 立 ? 容 易 设 起, 如果 能 选择 一 个 具有 这 种 性 质 的 
己 G4 纺 ， 则 在 理论 上 将 有 莫大 的 方便 ， 以 下 我 人 将 看 到 ,在 理论 
和 实用 上 最 有 意义 的 场合 下 ,这样 的 选择 的 确 可 能 ， 我 们 先 下 一 
个 正式 的 定义 . 

定义 1.3.2， 定 义 在 鹏 *x.z 上 的 画 数 PCA, 入 如 果 满 足以 
下 两 个 条 件 ; 

4. 对 辕 定 的 4E 雪 x, PC4, 人 作为 1 的 本 数 ， 是 乡 :- 可 测 
的 , 而 对 固定 的 iE .9 它 是 罗 。 上 的 概率 测度 ; 

b. 对 性 何 4E 多 x PP(4, 入 一 Pd 及 全. e. P")， 则 称 为 
在 给 定之 下 的 正则 条 件 概率 道 数 ， 也 简称 为 正则 条 件 概率 ， 

于 是 就 产生 了 正则 条 件 概 率 在 何 种 条 件 下 存在 的 问题 ， 关 于 
这 个 间 题 有 可 下 的 重要 定理 . 

定理 1.3.1. 设 全 为 妃 . 的 一 个 Borel 子 集 ， 而 用 为 名 的 
一 切 Borel 子 集 构成 的 o- 域 , 则 正则 条 件 概率 存在 . 

证 ， 将 概率 测度 卫 按 公式 

P(Ad) -P(AN2Y) 对 任何 4 多 
se 6 。 


扩充 到 角 . 上 , 看 出 , 不 炎 普 亡 性 可 设 (人 2 络 4) = (BB, 才 ). 
对 豆 , 中 任意 的 有 理 点 C8 …'， Gm) , 定 站 
Pla £7, tn t= PAa.o, |H). {1.38.20) 
这 里 4 一 Ce pn) 之 = ， 而 民 .3.20) 布 
边 为 尾 一 选 定 的 条 件 概 率 . 根据 条 件 概率 的 性 质 a bp 6， 易 见 : 
1) Flgy, 1, G0 (a, 6, P'); 
2) 及 一， 
Fe 0 am .06. P'); 


3) lm F hey "i Wil Di, itis 7 ns 六 


= FC oy Fils is itls “**» ni 四， 
i 2 nn (a. 8. PY; 


出 lim Fa, Ws fl Cis Gras nt 人 —0, 
加 -一 


4=1, ,8 1"); 
5 lim 百人 (gain 站 一 上 (a, e. PY). 


攻 一 
以 上 出 现 的 ma， 六 等 都 是 有 理 数 。 由 于 中 的 有 理 点 是 可 询 的 ， 
把 活 一 辐 全 部 “例外 集 ” 对 ,中 一 切 有 理 点 孝 合 并 起 来 ， 得 到 一 
个 集 瑟 EE 绑 s,，P(B) =0。、 国 此 ,对 任何 荆 吾 百人 oa …, tn; 个 作 
为 有 理 点 (et …，4m) 的 函数 ， 在 BR 的 有 理 点 集 上 满足 分 布 范 数 
的 全 部 性 质 ， 由 概率 论 可 知 , 这 时 (对 于 拭 天 站 (pp emi 下 可 
扩充 色 整 个 请 上， 得 lm pe si 科 。 当 拭 旦 时 ， 玉 (wr, …， 
si 间作 为 2 ，…'， 的 函数 ,是 一 个 站 维 分 布 画 数 ， 因 此 在 多。 上 
产 上 竺 一 个 测度 , 记 为 了 (4, 介 ， 当 拭 召 时 ; 了 (4, 人 为 名 上 的 概 
率 测度 ， 现 在 任 取 绍 , 上 的 一 个 概率 测度 (例如 户 , 而 定义 

PC -| pO sp 对 任何 4E 失 

， PCA， 当 引 GE 五， ~ 
我 们 来 验证 , 它 满足 正则 条 怕人 购 率 的 全 部 条 性. 
首先 , 固定 时 ,了 (Cd, 介 为 名, 上 的 概率 测度 ， 这 由 了 (C4, 从 

的 定义 立即 得 出 . 


» Bis 


={4:4€ 坟 ,P(A, 为 为 卫 的 溉 -可 测 函 数 }， 
划 册 (4, 才 的 定义 知 ， 当 4= 4a,(Cqr; wm) 为 BB 的 有 理 
点 ?时 ,有 
Fl 0 hn DDH, EEB, 
P(d), 当 #tEB. 
因为 了 (my 06 及 和 了 (4)( 它 作为 圭 的 函数 为 一 常数 ) 都 为 
红 呈 可 测 ， 故 P(4, 力也 为 了 的 绍 - 可 测 函 数 ， 这 说 明 4 E 仿 
.对 任何 有 理 点 aa …， go。 但 显而易见 ，8& 为 一 单调 类 因此 六 
包含 由 一 切 4 生成 的 we- 域 ， 即 六 这 无 异乎 说 ， 对 任何 
44E 细 了 了 (4 及 作为 计 的 通 数 , 为 级 一 可 测 . 
最 后 ,要 验证 已 Cd 及 一 下 站 如.e. P") 对 任何 4E 弛 ， 
把 一 切 满足 这 条 件 的 4 的 全 体 记 为 总 ， 则 由 PC4, 如 的 定义 知 ， 
5" 包 僻 一 切 形 如 4o,.o, 的 集合 。 因此 如 包 食 由 这 些 集合 生成 的 . 
域 .%L， 叉 由 条 件 概 率 的 性 质 6 及 当 # 固定 时 了 (C4, 日 为 绍 上 的 
概率 测度 ,可知 5* 为 一 单调 类 . 而 包含 sf 的 最 小 单调 类 就 是 级 ， 
这 证 明了 条。 中 任 一 集 女 都 满足 了 (4 人 一 PLA)D) (a. 6. PP)， 
. 定理 证 毕 . 
因为 在 继 大 多 数 情况 下 条 是 欧 氏 空间 的 Borel 子 集 , 这 定理 
的 意义 就 不 育 而 喻 了 。 应 当 指 出 的 是 : 正则 条 件 概率 并 非 在 任何 
情况 下 都 存在 . 


Ptd, 5-{ 


六 ) 正则 条 件 概率 的 性 所 


我 们 仍 沿 用 前 面 的 记 叶 . 
a、 车 工人 4, 为 为 正则 条 件 概 率 而 百 (F (ZE)) 存 在 有 限 , 则 


BK | OP 人 昌 Ge P). (1.3.21) 


这 个 性 质 说 明 : 在 正则 条 件 概率 存在 的 场合 , 条 件 期 望 可 通过 对 条 
件 概 率 测度 的 积分 得 到 , 一 如 在 通常 非 条 件 的 情形 ， 因 此 , 在 正则 


”条件 概率 存在 时 , 条 件 概率 和 条 件 期 望 的 关系 变 得 简单 且 自 然 ， 


为 了 证 明 ， 先 取 f (2) = (wm), AE 儿 4. 这 时 过 .3.21) 的 成 


站 区 号 于 


立 由 了 (4, 六 的 定 闵 直接 得 出 ， 由 此 出 发 , 使 用 例 行 的 推理 方法 ， 
知道 当 r 广 为 非 负 简 单 多 sw- 可 测 时 (1.3.2I1) 对 ， 从 而 按 到 开 为 非 
负 可 积 及 一 般 可 积 的 情况 ,证 毕 . 

pb. 车 正则 条 件 概 率 PCA, 如 存在 上 且 CF, 汾 9) 一 (有 2， 
对 某 个 各 ( 吉 更 一 般 节 ，.9 为 吾 。 的 Borel 子 集 ， 而 受 * 为 .9 的 
一 切 Borel 子 集 构成 的 re- 域 ), 出 存在 集 了 BE 多 zs，P* (BY =0, 至 

Prds, to) =1, 当 toEB. .38.22) 
此 处 4,= {wi 一 可}. 

这 个 性 质 的 直观 意义 是 很 清楚 的 ， 既 然 给 定 1(D 一 如 等 于 把 
限制 在 4 内 ,任何 合理 的 条 件 概 率 定 多 都 必须 (在 tm) = 加 的 
条 件 下 ) 赋 于 4 以 灶 率 1. 

为 了 证 明 , 考虑 函数 Te 斧 ,此 处 瑟 E 因 w 1ET， 饭 见 

TAD -PHB, 及 Ge. Po (1.8.28) 
为 此 只 需 验 证 ，Is 从 确实 满足 定义 了 (1(B} 的 全 部 条 件 ， 
Ja( 加 为 仇 二 可 测 显 热 , 取 尾 意 OE 趟 ;， 则 
| meP: PBNO) -PHBNO)) 
= PotB NE ON), 
因此 了 GTCB) 站 的 第 二 个 条 件 也 满足 ， 有 既然 Ts 信和 了 G1(B)Y， 
如 都 是 了 Q(B | 及，(1.8.28) 必然 成 立 . 

取 台 为 任 一 形 却 B= = (一 
的 集合 ，(B1，…',， bw) 为 Bw 中 之 有 理 点 ， 则 也.3.28) 的 例外 集 的 
"测度 为 0。 对 一 切 有 理 点 将 这 些 俩 外 和 集合 并 起 来 ， 得 到 一 个 集 
OC,, P* (O) 一 小 使 对 任何 形 吉 Byam 的 卫 ， 有 

Tx 一 PGCB), 入 对 任何 4EO. (1.3.24) 
现在 任 取 如 EC， 风 因 Tso) 和 Pt) ，t) 作为 BE 名 ys 的 画 
数 都 是 多 上 的 概率 测度 , 而 它们 在 一 切 形 如 成 ww 之 集 上 相等 ， 
故 必 有 
Jptto) 一 了 Q(B), t)， 对 人 尾 何 志 E 才 ;， 
特别 , 取 避 = {to}, 注意 直 (B) 一 ds 即 得 以 .3.22)、 证 毕 ， 


* D9 


系 1.8.1， 车 正则 条 件 概 率 P(4, 为 存在 且 (9， 级- = 人， 
避 由 (或 了 E 呈 等 等 })， 风 存在 玉 E:5r P*(B) =0,， 使 对 任何 
甸 一 可 测 函 数 8 四 及 种 一 可 测 函 数 了 (wm), 满足 条 件 (fF (及 )) 和 
(gCX))f(X)) 存在 有 限 ， 必 可 通 当选 择 召 ( 产 半 ) | 办 和 
酝 届 会 ( 亚 四 一)| 轨 , 致 

Bg XEIID -gD BCE ND, EB, .3.25) 
事实 上 , 只 需 取 


BZ) ND = |, 了 人 Pam ), 


B(GT FR) 的 一 go))F a) Pde, 有， 


则 他 ,3.2 的 立即 直人 .3.22) 得 出 注意 企 -3.35) 和 条 件 期 望 的 性 
质 g 的 差别 在 于 ; 在 那里 , 对 每 个 (虽然 也 有 人 .3.16), 得 例外 
集 与 天 的 可 能 有 关 ， 面 在 代 .-3.35) 中 , 对 一 切 E 有 一 个 公共 前 例 
外 集 五 

性 质 b 有 一 个 有 趣 的 应 用 , 从 之 可 以 看 出 , 尽管 条 件 概率 的 一 
般 定义 有 高 度 抽 象 的 形式 ， 它 本 质 上 仍 是 我 们 在 (二 ) 中 讨论 过 的 
最 简单 情况 的 自然 推广 ， 

设 (4 BB) 8 xF, Bx 人 BW, BO) 和 (FT, B) 是 
两 个 可 测 空 间 , 则 z 有 z= 区, 介 的 形式 ， 定 义 

ta) 一 如 当 w 一 (y, 办， 
这 显然 是 4 到 9 的 可 测 变 换 ， 若 多 和 了 都 是 欧 氏 空间 (入 。 
和 和 绍 ; 为 其 中 的 Borel 子 集 构成 的 o- 域 , 或 多 和 .9 都 是 欧 氏 空 
间 的 Borel 子 集 , 而 移 s 和 绍 ; 作 相应 修改 ), 则 ( 沼 ， 绍 w) 适合 定理 
1.3.1 的 条 件 ， 因 而 正则 条 件 效 率 沙 数 (4, 四 存在 ， 依 性 质 
Plds 自 开 对 把 吾 P"(B)~0， 即 对 埠 B， 了 (4, 四 全 集中 在 
集合 
4 一 {= 人 及, yEB 尾音} = 多 x 从. 

这 样 , 我 们 不 护 把 4 看 作 就 是 多 ,而 将 PC4, 让 写 为 也 (O, 和 的 
形式 : 了 (0, 攻 = PICx 从, 划 ，O EE 如 。， 现 在 对 固定 的 二 8， 


* 全 站 。 


万 (C 有 为 加。 上 的 娄 学 测度 ， 这 不 是 别 的 ， 正 信 变 量 了 在 给 定 
刻 最 1 之 下 的 条 件 概 率 分 布 ， 这 和 初等 概率 论 中 ,给 定 互 之 值 去 
和 锋 了 的 条 件 密度 的 情况 相 髓 . 
依 条 件 期 望 性 质 e， 当 孔 (F( 工 )) 存 在 右 限时 ,有 
BFR EB IDY. 
但 当 埠 如 时 . 
BRI fe) Pan, d= | fly, HP ay, 0. 

因为 PCB) ~0, 得 

BET) -| | fy, 六 El DaP"(), (1.3.26) 


这 正 是 初等 概率 论 中 习 芒 的 形式 . 


(七 ) 对 指数 分 布 族 的 应 用 

我 们 利用 本 节 的 结果 证 明 指 数 分 布 族 的 几 个 性 质 ， 以 备 将 来 
之 用 ， 

引 理 1.8.3. 设 耳 的 祥 本 空间 为 (2 弛 se), 其 分 布 为 指数 族 
0.2.40) ， 则 HE) = Ga (ED)，…。 ZuwCZ)) 的 分 布 也 是 指数 族 . 

证 . 如 前 面 指出 的 , 用 将 h(D "吸入 ”4 的 办 法 , 不 失 普 遍 性 
可 设 Roy =] 区) 的 样本 空间 为 《F， 银 r) = (Bo，B) ， 测度 
通过 变换 i(s) 在 多 。 上 导出 的 测度 记 为 放 ， 则 对 任何 BE 女 ， 
有 

P(e(X) E 司 -| ,Oerp (om,(e) dn). 

根据 引 理 .3.3, 得 


Pole(X) €B) ~ |, Oerp (06) adn. 


这 表明 : 1(X) 的 概率 分 布 对 测度 的 密度 为 O69)exp (高 9 加)， 
即 有 指数 族 的 形式 ,证 毕 . 
车 下 的 分 布 为 


= 和 人 


Fe 0, 交友 的 CC, 四 ezp( 袜 2 四 
十 之 PrP se) Jau (0), (1.8.27) 


则 把 exp( 宝 mwTiGe) ) “吸入 ”记得 测度 po。 而 此 测度 下 过 变换 


0 = 人， Th (0) ) 在 # 的 样本 空间 《ZF ， 岁 上 导出 的 测 
度 记 为 wz 则 直上 述 引 理 知 , 当 w 固定 而 8 变化 时 ， 

tCRY = CT CR), Tr)) 
的 分 布 仍 为 指数 族 : 


Os Cb)orp (BO)dps), (O00) =0C0, P)). (1.3.28) 


然而 , 要 注意 Os (四 和 pw 都 与 9 有 关 . 

引 理 1.3.4， 设 匡 的 样本 空间 为 〈 受 ， 家 s)， 其 分 布 为 指数 
族 位 .3.321)， 以 Pos 人 | 了) 记 在 给 定 卫 = (7 pe， 了 om 时 
(7 1 的 条 件 概率 分 布 , 则 Pe ok" 1 了 ) 与 史 无 关 且 是 指数 族 
{因而 可 记 为 Pls [PD)). 

证 . 不 妨 概 定 { 名 ， Bz) 一 (OxY, BX Bn). 否则 我 们 可 
考虑 变量 GP) = (了 (下 7) (在 )， 了 本 )， ,Yn\#¥)), 
根据 引 理 .3.1， 它 的 分 布 有 形 如 忆 .3.27) 的 指数 族 . 

在 分 布 族 入.3.27) 的 自然 参数 空间 中 任意 选 定 一 点 (9 9 
二 {的 印 几 1)， 并 简 记 在 侈 办 = 9, 9) 时 六 的 概 
率 分 布 测 诬 Py ,yr 为 Po , 且 不 芒 设 C(8 ,9po)=1, 则 易 见 
《1.3.27) 可 改写 为 

了 人 9, pd) ~ O00, Porp | 0 OTs) 


+ (po—oDY te) |aPol®). 


以 Pa(. 1 了) 记 在 概率 分 布 Po 之 下 ,在 给 定 了 时 的 条 件 概率 分 
布 ; 其 存在 已 在 (六 ) 中 指出 ， 现 在 证 明 : 


PasGEBIY) = | ,oxp(B O00 )Po aislY) 


/[ el (G1 OD jPodt|Y), (1.3.29) 


为 此 需要 证 明 两 点 ， 一 是 这 样 定义 的 PoCtE BIY) 是 了 的 绍 。- 

训 测 函数 . 这 由 PX* | 了 了 ) 的 性 质 及 exp( 宫 (9, 一 8) ) 为 1= 6，… 

名 的 连续 函数 直接 得 出 、 另 一 点 是 要 证 明 ; 对 任何 CE 8 有 
PerlEB, 7 EO) =| Po GE BI AP (y). (1.3.30) 


这 里 5。 为 变量 了 (人 ) 一 《C1( 革 ),…， 了 wm( 革 )) 的 概率 分 布 ， 当 
(9, 由 = (9 时 , 这 概率 分 布 记 为 如 我 们 先 证 明 ; 


Piss) -| 0, wosp(E -py) 
x [foxp(S O04 )Po Gtly) |aPr Cw). 


(1.8.81) 
事实 上 , 依 定义 


Ed 路 
Pr.) -| ce pexp( 窜 su+ 避 wapjar 


=| ce@， )exp[ 《8 一 加) 二 十 sp) yl]aP,, 


(1.8.32) 
根据 导 .3.26) ,由 夺 .3.32) 立 即 得 出 民 .3.33 . 
现在 将 (1 .3.29) 所 确定 的 Ps,。 人 EBI) 和 红 .3.81) 记 确定 的 
P&e 代入 过 .3.30) 的 右边 , 将 得 


[Pas €E BaP) = |,00, 9) orp(S pp), 
[fexp(S 6.~ 0D) Po ary) Japy Cw) 
= fo, exp[B (0. 0D ut Sp-ppylaP, 
= [00, Doxp[Oh+E py ]dp— Pas (BxO). 
因而 性 .3.30) 确实 成 立 , 从 而 证 明了 (1.8.29). 
现在 将 (1.8.29) 右边 的 分 母 记 为 051(0), 又 将 oxp( 一 这 084) 


«4. 


“吸入 "测度 Po( | 殷 ， 得 测度 2%w()。 于 基 得 到 给 定 了 了 一 y 时 ， 
= (TI*…， 了 WD 的 条 件 分 布 为 


O, (0) "erp(> bts)ivs 0). (1.3.83) 
从 而 证 明了 所 要 的 结果 ， 


§ 1.4， 统计 判决 的 基本 概念 

(一 ) 引 定 

绕 计 推 断 的 基本 问题 是 由 样本 推断 总 体 。 所 谓 “ 总 笨 ”， 从 数 
学 的 角度 说 , 就 是 随机 变量 (比方 说 大) 的 概率 分 布 . 所 谓 “ 样 本 ”， 
就 是 这 随机 变量 互 的 观察 秆 (比方 说 鸭 .， 互 的 分 布 是 未 知 或 部 
分 未 知 的 ， 如 已 完全 知道 , 从 统计 上 说 , 就 没有 什么 推断 的 工作 要 
做 。 好 比 一 大 批 产 品 , 其 废品 率 为 p, 当 克 已 知 时 ， 不 存在 从 这 批 
产品 中 抽样 以 决定 ?的 问题 。 当 多 未 知 时 ， 如 果 我 们 从 这 一 大 批 
产品 中 随机 抽出 个 ,并 以 互 记 其 中 的 庆 品 数 , 则 三 服从 二 项 分 
布 (mn, P)， 在 这 里 , 互 的 分 布 只 是 部 分 未 知 , 因为 其 类 型 (二 项 ) 
已 知 , 但 某 些 参数 (加 的 上 基体 值 未 知 ,样本 三 在 一 定 程度 上 透露 了 
有 关 总 怖 的 分 布 的 信息 . 统计 推断 , 就 是 要 尽 可 能 充分 地 利用 这 
种 信息 , 去 作出 尽 可 能 精确 可 车 的 , 关于 总 体 分 布 的 论断 ， 这 种 论 
断 , 由 于 样本 三 一 般 不 包含 总 体 分 布 的 全 部 信息 , 不 能 保证 是 百 
分 之 百 精 确 可 靠 的 . 然而 , 这 决 不 等 于 说 这 种 统计 性 的 推断 没有 
确切 的 意义 。 实际 上 , 这 种 推断 的 音义 正如 在 欧 氏 几何 公理 体系 
下 所 推演 出 的 任何 一 个 命题 那样 明确 .在 以 后 各 章 中 会 看 到 对 这 
一 点 的 具体 解释 . 

随 著 具体 问题 要 求 的 不 同 , 统计 推断 的 形式 也 是 多 种 多样 的 ， 
拿 初等 绽 计 中 讨论 很 儿 的 有 关 正 态 分 布 总 体 昼 (4, cc 的 问题 来 
说 ,我 们 的 要 求 可 能 是 要 居 计 罗 值 &. 这 时 推 斯 的 形式 是 从 样本 于 
算出 一 个 值 (例如 常见 的 站) 以 之 作为 a 的 估计 , 这 种 形式 的 推断 


a 进 昌 


冲 点 估计 ， 我 们 也 可 能 要 求 把 e 估计 在 某 范围 内 , 这 时 推断 的 形 
起 是 从 样本 让 算出 一 个 区 间 [mi ()，@(Z)]， 而 推断 在 这 区 
间 内 .这 种 形式 的 推断 叫 区 间 和 估计 ， 我 们 的 要 求 也 可 能 是 要 判断 
“as0” 这 个 “假设 ”是 天 成立 ， 这 时 推断 的 形式 是 制定 一 个 规则 
(检验 ), 根据 这 个 规则 , 对 每 个 县 体 的 样本 w 都 能 回答 是 否 该 接受 
或 否定 这 全 候 设 . 这 就 是 所 谓 “ 假 设 检验 ”的 问题 .以 上 三 种 形式 
是 目前 研究 最 深入 的 几 种 统计 推断 形式 . 当然 , 也 还 有 其 他 重要 
的 形式 . 例如 在 试验 的 设计 和 分 析 中 ,最 常见 的 一 个 推断 问题 是 
从 若干 种 处 理 中 挑选 一 个 最 好 的 . 

从 这 个 简单 例子 也 看 山 , 统计 推断 有 种 种 形式 , 各 个 问题 在 数 
学 上 的 提 法 也 有 所 差别 . 四 十 年 代 后 期 以 来 ，A. WWald 提出 了 一 
种 看 法 ， 企 图 把 种 种 形式 各 不 一 样 的 统计 问题 纳入 到 一 个 绕 一 的 
模式 中 ， 这 就 是 所 亩 "统计 判决 函数 "的 理论 ， 这 个 理论 的 基本 产 
点 现在 已 不 同 程 度 地 渗入 到 椒 少 统计 分支 中 ， 对 尔后 数理 统计 学 
的 发 展 起 了 一 定 的 影响 。 因此 ， 它 的 一 些 基本 内 容 是 学 习 数 理 统 
计 基 础 的 人 所 必须 掌握 的 ， 

本 节 的 目的 是 介绍 这 个 理论 的 几 个 最 初步 的 概念 ， 更 细节 的 
内 容 , 留待 以 后 结合 具体 问题 作 一 定 的 补充 。 然 而 ,没有 打算 在 本 
书 中 对 这 个 理论 作 系 统 的 介绍 ， 这 除了 由 于 本 书 的 性 质 和 篇 幅 的 
限制 姑 , 还 有 以 下 两 个 原因 ; 一 是 作者 认为 ,尤其 在 开始 时 , 最 好 结 
合 具 体 统计 问题 来 学 这 个 理论 , 才 虹 富有 成 果 , 特别 对 统计 各 主要 
分 克 所 知 甚 少 的 人 人, 更 是 如 此 ; 另 一 个 原因 是 尽管 这 个 理论 提出 了 
不 少 新 概念 , 新 准则 , 为 一 些 老 间 题 提 出 了 新 看 法 , 提出 了 一 些 新 
问题 甚至 开辟 了 某 些 新 的 研究 领域 ， 但 在 具体 处 理 问 题 的 方法 上 
和 技巧 上 却 未 能 提供 许多 新 家 西 ， 因此 在 … 定 程度 上 可 以 说 , 这 
个 理论 还 只 有 一 个 外 壳 ， 在 像 本 书 这 样 的 基础 性 著作 中 , 在 这 方 
画 花 过 多 的 篇 幅 是 不 恰当 的 ， 然 而 ， 这 并 不 意味 着 作者 低估 这 个 
埋 论 的 意义 。 我 们 前 已 指出 ， 掌 握 这 理论 的 基本 于 点 是 必需 的 . 
希望 深入 了 解 这 理论 的 读者 可 参阅 Blackwell 和 Girshiokc 及 
Waido2 的 有 关 文 献 ， 
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(二 ) 统计 判决 问题 的 三 个 要 案 


一 、 样 本 空间 和 分 布 旗 ， 如 上 面 所 说 明 的 , 统计 推断 的 任务 
是 推断 某 总 体 , 即 某 变量 瑟 的 分 布 ， 这 不 一 定 就 是 届 定 出 这 个 分 
布 本 身 ， 所 以 更 确切 地 说 , 应 当 是 推断 与 了 的 分 布 相关 联 的 某 些 
事项 , 如 估计 其 方差 之 类 , X 的 分 布 间 不 知道 ,但 一 般 假 定 它 居 于 
某 个 一 定 的 分 布 族 .多 中 . .多 的 具体 形式 当然 随 问 题 而 定 ， 在 人 有 
的 问题 中 , .多 规定 得 很 具体 , 比方 说 多 是 正 态 分 布 族 。 这 时 , 瑟 
的 分 布 族 .多 的 数学 形式 已 知 ， 所 不 知道 的 只 是 其 中 的 某 些 常数 ， 
例如 丈 (o， co 中 的 e 和 oa? 二 项 分 布 Cn, 功 中 的 多 等 等 ， 在 另 
一 些 情况 下 , 对 属于 .多 的 分 布 只 指出 它 有 有 某 种 一 般 性 质 , 例如 其 
分 布 函 数 连 续 或 绝对 连续 , 而 对 其 具体 形式 则 无 所 规定 。 我 们 以 
后 会 有 机 会 看 到 这 些 差别 的 意义 的 仔细 论述 ， 目 前 我 们 只 需 明 
确 ， 事先 我 们 知道 互 的 分 布 在 族 多 内 ， 在 这 个 前 提 下 来 讨论 问 
题 的 . 

用 测度 论 这 个 工具 可 作 简 明 而 确切 的 陈述 。 下 的 每 一 个 具 
体 值 = 称 为 一 个 样本 ， 一 - 切 可 能 的 样本 组 成 一 个 空间 内， 称 为 样 
本 空间 ， 需要 指出 的 是 ,只 需要 求 光 包含 了 并 的 一 切 可 能 值 就 
行 了 ， 而 不 必要 求 下 确实 能 到 多 中 每 个 值 ， 例 如 ， 三 可 能 是 只 
联 大 于 0 的 值 ， 但 我 们 也 可 以 取 ( 一 so，co) 作为 样本 空间 ， 这 种 
看 法 有 很 大 的 方便 ， 在 多 中 引进 一 个 o- 域 罗 w， 在 确定 样本 空 
间 时 , 必须 间 时 指出 入 和 Su 二 者 , 因此 常常 把 (他,， 才 2) 叫做 样 
本 空间 .最 常见 的 样本 空间 是 多 为 w 维 欧 氏 空间 如， 而 Ba 为 
其 Borel 集 构成 的 o- 域 ， 或 中 为 RB。 的 Borel 子 集 ， 而 多 ,为 入 
的 Borel 子 集 构成 的 o- 域 ， 这 两 种 情况 一 般 不 需 严 加 区 别 。， 因 
此 ,在 无 特殊 声明 时 , 当 我 们 写 (8， 儿 sw) = (BR 。 和 多) 时， 也 可 以 包 
含 后 一 情况 ， 我 们 往往 用 “ 爽 氏 样本 空间 ”来 称呼 它 。 也 需要 指 
出 , 在 考 碟 某 些 理论 问题 时 , 有 可 能 要 考虑 比 欧 氏 样本 空间 更 广 的 
情况 . 

在 终 s 上 定义 一 族 概 率 测度 1Ps, 9 EB}, @ 称 为 参数 空间 ， 


这 一 族 分布 就 是 前 面 指出 的 分 布 族 多 , 不 过 换 了 一 种 记 法 . 在 许 
多 情况 下 , 日 是 mn% 维 欧 氏 空间 或 其 中 的 一 个 Borel 集 , 这 种 人 情况 是 
目前 研究 得 最 深入 的 ， 但 也 有 许多 不 属于 这 种 情况 的 重 可 例子 . 
确定 分 布 族 { 了 Ps, 日 所 无非 就 是 说 ,事先 指定 了 下 的 分 布 必 在 这 
个 族 中 , 即 存在 加 ES, 使 于 的 分 布 就 是 Ps, 这 后 是 不 知道 的 且 
正 是 统计 推断 的 对 象 . 
样本 空间 加 上 分 布 族 就 确定 了 观察 值 ( 样 本 ) 的 概率 结构 ， 我 
们 往往 写 为 { 受 ， 腕 sw。，Po ,0EeB 这 样 的 形式 , 或 者 说 : 于 的 样 
本 空间 为 ( 巡 ， 胃 sw) ,分布 族 为 (Po 晶 E 同 . 
例 1.4.1， 一 个 很 重要 的 情况 基 ， 芝 一 ( 广 1，…'， 正 中， 六 
"和 莹 。 独 立 同 分 布 ， 击 长 ,可 以 是 一 维 或 多 维 随 机 变量 .六 确定 
计 不 妨 设 为 一 维 的 , 这 时 有 (全 ,党 nw) = (Bs, 二) .为 了 规定 互 的 
分 布 , 只 需 规定 ,的 分 布 就 行 ， 设 瑟 i 的 分 布 (定义 在 (Bx, 才 ,) 
上 ) 腐 于 一 个 族 {P。, 5EB, 则 三 的 分 布 族 为 
{PP xP,x..-.xP,, 8€8}. (1.4.1) 
此 处 Pox… x 各 中 的 “x? 是 代表 测度 的 直 积 ， 而 非 适 常 的 乘法 ， 
这 种 情况 出 现 很 多 ， 为 称呼 上 的 简便 ， 常 简 记 为 “ 卫 ，:…， 革 ,为 
iid.,， 及 1 服从 某 蘑 分 布 "， 按 民 .4.1， 这 个 陈述 完全 确定 了 样本 
芋 一 《下 1， 的 分 布 族 {Po， BEBl， 在 这 个 场合 , 有 时 我 们 
也 称 单个 的 互 ; 为 样本 ， 而 五 为 “ 合 样本 ”， 三 的 分 布 称 为 “联合 
分 布 ”等 等 ， 
例如 ， 在 初等 统计 中 讨论 很 儿 的 一 个 情况 ， 素 1:，…， 工 ,为 
i 刘 ,， 玉 1 入 (8 ga。 这 时 ， 及 一 (下 1,， ,于 n) 的 分 布 密度 构成 
一 个 族 
(aa 的 = (Vdxo) -wezp (一 也 
参数 为 8 一 (qa, 0 参数 空间 为 
B= fo :一 ce<G<co Oglecioo}, 
邯 Es 中 的 上 半 平 面 . 
例 工 .4.2. 设 有 一 堆 产 品 共 不 个 (F 已 知 )， 其 中 度 品 天 个 ， 


. Fs 
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并 未 知 ， 从 其 中 不 放 回 地 抽样 次. 令 mw 一 0 或 1， 视 第 二 次 抽 
样 的 结果 为 合 络 品 或 康 品 而 定 , = (ea，…，2) ， 

这 时 ， 样 本 空间 由 形 如 .上述 (mw，…，2) 的 一 些 点 构成 ， 其 中 
每 个 %% 可 取 0, 工 两 个 值 ， 故 时 一 共 包 合 守 个 点 ， 歼 zs 为 时 的 
一 切 子 集 构 成 ， 玉 一 (了 …， 三 的 分 布 为 


一 一 (此 一 1 
Pee 


,NWN-M, NM-1 ,. N-M-ntgk+1 
Nk Nk—1i N—n+1 
其 中 天 沟 和 s，…, gm 中 1 的 个 数 ， 此 处 于 起 参数 的 作用 , 参 教 空 
间 为 {0, I，…, 四 }, 共 包 售 丈 上 个 点 .在 本 例 中 ,各 次 观察 结果 
至 …， 蕊 ,并非 独 立 ， 
人 鲍 1.4.8. 在 理论 几 究 中 常 采 用 的 一 种 结构 如 下 ， 设 为 样 
本 空间 (全 绍 r) 上 的 一 个 o- 有 限 测度 , 假定 分 布 藤 {Pw 9EB} 中 
每 个 分 布 已 都 对 记 绝 对 连续 ，P,< 几 对 一 切 9E8， 这 寺 我 们 常 
称 分 布 族 为 久 所 控制 ， 并 记 为 {Ps, 8E@} gp， 有 时 我 们 也 用 一 
个 统一 的 记号 多 来 记 {Ps, 9E9}, 这 时 可 以 写 jp. 以 Fo 六 
记 Po 对话 的 Radom-Nikodym 导数 ， 它 称 为 分 布 Ps 对 的 密 
度 . 这 时 , 分布 族 可 昼 用 密度 族 {F fm 月，6EgN 的 形式 给 出 ， 在 
天 需要 特别 指骨 时 , 可 以 记 为 {f(z Dat(w), 5E9}. 
这 是 一 个 包罗 很 广 的 情况， 在 《条 ， 宕 。) = 〈B.， 雪 .) 而 内 为 
三 测度 时 ， 就 是 初等 统计 中 常见 的 情形 ， 另 一 常见 情况 是 休 为 
及, 中 的 一 个 可 列 集 , 而 轨 。 为 条 的 一 切 子 集 构成 的 o- 域 , zw 为 其 
上 的 计数 测度 ， 上 述 例 1.4.2. 及 常见 的 二 项 分 布 族 , Poisason 分 布 
族 等 , 都 属于 这 个 情况 . 
我 们 这 果 不 涉及 在 实际 问题 中 应 如 何 选 定 分 布 族 的 问题 ， 在 
有 些 情 况 ， 例 如 在 例 工 .4.2 中 , 分 布 族 册 理论 模型 本 身 就 确定 了 . 
在 多 数 场合 , 这 需要 对 特定 应 用 癌 题 的 知识 , 而 主要 并 非 一 个 数学 
问题 ， 但 是 ， 数 学 上 处 理 的 简单 也 是 一 个 重 取 考虑 、 在 应 用 中 常 
假定 分 布 族 为 正 态 的 , 固然 不 无 理论 上 的 依据 ,但 处 理 上 的 简单 可 
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行 也 是 一 个 原因 , 

二 、 判 闫 空间 在 给 定 了 分 布 族 且 提出 了 一 定 的 统计 推 其 
问题 (如 点 傅 计 , 假 访 检 验 等 ) 后 ,就 可 根据 所 抽 得 的 样本 来 回答 所 
提 的 问题 ， 每 一 个 具体 的 回答 都 称 为 一 个 决定 或 “ 判 问 ”"， 例如 ， 
阁 问 题 是 要 估计 义 (&, oo 中 的 w 则 工 .5 这 个 数 就 是 一 个 判决 , 它 
表示 "用 并 作为 的 估计 ”这 个 决定 .当然 , 具体 作出 什么 决定 ， 
与 样本 和 用 的 统计 方法 有 关 , 但 在 一 定 问题 中 , 所 能 作出 的 列 决 的 
全 性 是 事先 就 明确 的 . 比方 在 上 面 佑 计 六 (ee，o3 中 的 上 的 问题 中 ， 
《一 co，oc 中 每 个 数 都 有 可 能 拿 来 估计 s。 因 此 可 能 判决 的 全 体 
是 4 ee，eo). 如 果 下 于 问题 的 实际 含义 使 e 不 能 取 所 0 的 数 , 则 
可 能 判决 的 全 体 沟 0，co) .我 们 称 一 切 可 能 羯 决 的 全 体 多 为 “< 泣 
决 空间 ”。 在 假设 检验 问题 中 ,可 能 作出 的 决定 只 有 两 个 , 接受 或 
否定 所 提出 的 假设 , 如 果 抬 这 两 个 判决 分 别 记 为 员 和 也 ， 则 判决 
空间 为 乡 = to 4}， 只 包含 两 个 点 ， 在 区 间 佑 计 { 假 定 估 计 一 个 
实 参数 ) 中 ， 判 决 空 间 作 可 取 为 豆 的 一 切 有 界 区 间 的 上 集合 。 或 
者 , 也 可 以 令 

号 一 {1[&， 站 ;一 ce < 天 col， 
而 把 La, 8] 看 作 吾 s 中 坐标 为 四 总 的 一 个 点 ， 这 时 多 是 刺 的 一 
个 子 集 . 当然 , 也 可 以 对 兰 决 加 上 一 些 限 制 , 如 必须 有 6>D 5 由 
或 区 闻 长 5 一 4 不 超过 荣 个 指定 的 5S>0 等 ， 这 时 有 相应 的 判决 空 
间 . 

一 种 在 庶 用 上 常见 的 情况 叫做 所 谓 “ 多 疗 决 问题 "， 这 是 指 判 
决 空间 多 为 一 个 有 限 集 (元 素 个 数 一 般 大 于 2) 的 情况 , 如 果 要 从 
了 个 处 理 中 挑 出 一 个 最 好 的 , 则 及 = {d,，…, dj}， 其 中 出 表 示 " 常 
《个 处 理 认 为 是 最 好 的 “这 个 决定 .如 果 问 题 是 要 给 这 了 工 个 处 理 的 
优 劣 排 一 个 次 序 , 则 多 由 形 如 ms 这 样 一些 判 纪 构 成 ,da 表 
示 “ 认 为 处 理 人 最 好 , 各 次 之 ， 血 又 次 之 …， 和 最 差 ” 这 个 决定 . 
这 时 及 一 共和 包含 94 个 元 素 . 

判 央 空间 往往 直接 由 实际 问题 提 法 就 明确 了 ， 所 以 它 指 选 定 
不 是 一 个 大 问题 . 从 数学 上 说 ， 判 决 空间 无 非 就 是 一 个 集合 多 
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为 了 理论 的 需要 ,在 急 中 要 给 定 一 个 o 域 零 。。 最 常见 的 银 有 
两 种 情况 ， 一 荐 儿 为 欧 氏 空间 或 其 一 Borel 子 集 ， 这 时 绍 s 取 为 
多 的 一 切 Borel 子 集 构成 的 o- 域 ; 一 是 多 为 一 有 限 集 ， 这 时 自 
然 地 ,， 雪 = 由 多 的 一 切 子 集 构成 . 

三 、 损 活 务 数 . 设 已 定 了 概率 分 布 族 {(%， 多 w，Pe)， 
8E} 与 判 央 空间 人 艰 ， 不 言 而 鸣 ， 在 每 一 具体 情况 下 ， 儿 中 的 判 
决 的 优先 各 个 不 一 ， 拿 一 个 最 简单 的 例子 来 说 ， 设 问题 是 要 估计 
太 oo) 中 的 &。 假定 的 真实 值 为 世 那么 2.5 这 个 判决 显然 
比 10 这 个 判决 好 ， 如 果 要 作 aa 的 区 闻 估 计 , 则 居然 [0.5, 工 .加 这 
个 判 诺 比 [ 一 5, 8] 这 个 判决 好 . 

判决 画 数 更 论 的 一 个 现 点 是 把 上 面 所 谈 的 优 劣 性 数量 化 ， 方 
法 是 引进 一 个 依赖 于 参数 值 4E@ 和 判决 4E 久 的 函数 (8) 
郑 0, 它 解 释 为 “ 当 参 数 真 实 值 为 &( 即 互 的 分 布 为 Po) 而 采取 的 判 
决 为 了 时 所 造成 的 损失 “判决 愈 正确 , 损失 就 全 小 ， 这 个 函数 叫 
做 “损失 葡 数 ， 它 是 统计 判决 理论 前 基本 概念 之 一 。 我 们 举 志 个 
例子 来 说 明 这 个 概念 . 

例 1.4.4. 设 问 题 是 要 估计 说 @, 力 中 的 未 知 参 数 8 的 一 
切 可 能 值 ， 即 参数 空间 B， 为 (一 cc, co)， 党 决 空间 自然 地 取 为 
多 =《〈 一 co co)。 一 个 可 以 考虑 的 损失 函数 是 

LB, DD = OY 
当 69=8 邯 估 计 正 确 时 ， 扎 失 为 0， 估 计 # 与 实际 值 8 的 距离 
1a~6| 念 大 , 损失 也 愈 大 ， 

例 1.4.5. 设 问题 是 要 作 友人 1) 中 的 未 知 参 数 乡 的 区 间 估 
计 . 吕 仍 取 为 《一 ceo， oo， 号 可 以 取 为 一 切 有 界 区 间 ia, 四 之 
集 . 

当 参 数 真实 值 为 8 时 , 判决 4= fe, 各 的 谍 劣 可 以 从 两 方面 去 
考 虚 ， 一 是 [a, 由 是 否 包 食 B 一 是 [8, 有 昌之 长 如 何 ， 前 者 反映 判 
决 的 可 车 性 的 一 面 ， 后 者 反映 其 精确 性 的 一 面 、 如 果 [am, 门 昌 包 
全 了 8 但 5 一 4 很 大 ,或 3 一 a 很 小 但 [4, 轨 并 不 包 食 名 判决 [4m, 可 
都 不 见得 好 ， 考 虑 到 这 两 方面 , 一 个 可 供 考虑 的 损失 函数 是 


s BO 。 


4 二 8 起 一 的 ， 落 2E Tie, 8]， 
BE-m， 车 2E [时 ， 

这 里 4> 册 五 >0 为 两 个 适当 选择 的 常数 。 务 一 个 可 殿 选 择 的 损 

失 函 数 基 


LB, [s, 8]) -| 


Le, [a, BD 一 1 一 人 十 和 一 中 |. 

例 1.4.6. 设 问题 是 楼 检验 入 (9, 了 D 中 的 关于 未 知 参数 的 
假设 9<0， 这 时 急 == {do, 而}，%, 中 分 别 代表 “接受 假设 "和 :和 悍 
定 假设 ”这 两 个 判决 .一 个 可 殿 考 虑 的 损失 请 数 是 

L(g, do) -人 当 Ps0 B， 当 #8 
由 ， 当 00D， 0， 当 8#>0., 
其 中 4>>0, BB>>0 为 两 个 适当 选择 的 常数 . 

例 1.4.7. 设 问 题 二 要 共 天 个 正 态 分 布 NO, ,i 一 11, 上 
中 ,， 挑 出 其 均值 最 大 的 那 一 个 。 这 时 参数 为 8-H,…, 后 .最 
定 每 个 各 可 时 (一 cc，cso) 中 任何 值 ， 则 参数 空间 旧 = 否 ， 判 决 空 
间 多 一 {三 只， 其 中 四 表示 “把 第 4 个 分 布 的 均值 刀 定 为 最 
大 的 ”这 个 判决 . 这 时 ,一 个 可 供 选择 的 种 失 函 数 是 

LB, 1 Ors a = max 太一 由 


以 上 诸 例 中 所 提供 的 损失 阔 数 ， 都 不 过 是 大 量 可 供 选 择 的 损 
失范 数 的 个 别 傅 子 ,在 这 里 , 我 们 磁 玫 将 判决 理论 用 于 实际 问题 的 
一 个 基本 内 难点 ; 在 每 一 具体 问题 中 , 如 合 逃 择 与 实际 情况 符合 的 
损失 函数 , 因为 在 一 般 情 况 干 , 不仅 采 更 一 种 决定 的 优 劣 不 中 得 都 
能 数量 化 ,即使 在 那些 将 其 数量 化 看 来 是 合理 的 场合 , 与 该 问题 具 
杠 情 沈 相 和 近 应 的 数量 指标 , 也 不 易 确定 下 米 ， 拿 恒 1.4.4 来 说 ,车 
9 真实 值 为 而 用 2 去 估计 它 ， 在 尔后 的 应 用 中 究竟 造成 多 大 损 
失 ? 这 恶 怕 不 是 一 个 好 回 管 的 问题 。 由 于 这 个 原因 ， 在 选择 损失 
函数 时 ， 往 往 愉 能 在 满足 一 般 的 合理 性 要 求 的 前 提 下 (例如 在 例 
41.4.4 中 ,函数 王 作 起 于- 十 人 旭 一 办 司 司 显 热 就 不 能 合理 地 作为 
损失 函数 ), 选择 那些 在 数学 上 处 理 起 来 比较 简单 的 函数 作为 损失 
函数 ， 


L(g, ds) -| 


= Bi" 


不 过 , 也 不 应 当 由 以 上 所 述 就 认为 , 基于 损失 函数 这 个 概念 的 
判决 函数 理论 没有 什么 实际 意义 ， 在 一 些 问 题 中 , 我们 往往 并 不 
必须 指定 损失 项 数 的 其 体形 式 ， 重 只 需 假 定 它 满足 一 些 一 般 人 性 的 
要 求 ， 在 这 种 前 提 下 推出 的 结论 就 有 一 定 的 普遍 意义 .比方 说 ， 
大 家 都 知道 在 估计 正 访 分 布 的 询 展 时 , 冬 本 均值 工 是 一 个 好 的 估 
计 , 但 是 为 什么 ? 万 等 统计 不 能 很 充分 地 回答 这 个 问题 .在 佑 计 理 
论 中 ， 证 明了 于 在 很 一 般 的 损失 函数 和 种 种 不 同 的 良好 性 准则 
下 , 都 是 一 个 好 的 估计 ， 很 显然 , 这 使 我 们 对 问题 得 到 更 深 一 层 指 
理解 . 

最 后 , 为 了 数学 论证 上 的 需要 , 对 损 类 函数 可 加 上 一 种 可 测 性 
的 要 求 、 为 明确 计 , 我 们 将 严格 定义 写 出 如 下 : 

定义 1.&.I. 设 参 数 空间 为 人 日 而 判决 空间 为 (多 ， 浇 o)， 任 一 
定义 在 恕 x 儿 上 的 函数 三 但 0) 如 满 是 以 下 两 个 条 件 ， 则 称 为 是 
损失 函数 

2a. 0<L9, 四 二 ec 对 任何 E98 和 2 

b， 对 任何 辕 定 的 95E6,， 上 (8, 中 作 为 8 的 函数 , 是 有 一 可 测 
的 . 


{三 ) 判决 函数 


在 一 个 具体 问题 中 , 我 们 的 任务 可 归结 为 在 判决 空间 多 由 选 
定 一 个 看 来 是 好 的 判决 &。 Ga 的 好 坏 到 决 于 损失 男 数 工 介 , 四 之 
值 . 车 参数 真实 值 已 知 , 则 由 荆 (9, 二 可 以 知道 那 一 个 (或 那些 ) 
决定 是 最 好 的 . 知道 和 等 于 知道 于 的 分 布 , 既然 下 的 分 布 末 知 ， 
我 们 就 只 能 利用 样本 2 中 所 包含 的 关于 工 的 分 布 的 信息 , 来 帮助 
我 们 作出 选择。 因此 , 统计 推断 的 任务 就 在 于 建立 这 样 一 个 定义 
于 样本 空间 和 上 击 取 值 于 多 内 的 函数 8(o)， 使 当 有 了 样本 z 
时 ， 就 采用 判决 5(w)。 这 种 画 数 称 为 “统计 划 决 函数 ”, 其 正式 定 
义 如 下 . 

定义 1 和 2. ( 非 随机 化 统计 判决 函数 )。 设 拌 本 空间 为 《2 
银 +)， 判 决 空间 为 (多 ,多 w) 任何 定 义 于 芝 而 取 值 了 于 多 的 可 测 
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变换 8(z) 都 叫做 一 个 统计 判决 画 数 (简称 为 判决 务 数 ). 

这 样 定义 的 判决 函数 称 为 是 “ 非 随机 化 的 ”说明 郊 后 ， 

我 们 不 用 仔细 列举 判决 函数 的 具体 例子 了 。 在 初等 统计 中 常 
叱 的 一 些 估计 量 ， 就 是 这 种 例子 ， 任 何 一 个 检验 显然 也 是 定义 
1.4.2 之 下 的 一 个 判决 函数 ， 例 如 ， 王 1，…， 瑟 为 iid, 样本 ， 
下 ; 心 克 (8 1)， 要 检验 假设 卫 :6 志 0， 初等 统计 中 给 出 的 检验 形 
式 为 : 定 册 常数 0, 然后 根据 玄 是否 所 0 而 决定 是 接受 还 是 否定 
假设 豆 ， 显然, 它 可 以 写 为 判决 画 数 中 的 形式 如 下 ， 

如， 当 工 鞍 品 ， 
Bm | E>0. 

风 院 务 数 ， 在 一 个 具体 问题 中 ， 可 供 选择 的 判决 函数 很 多. 
如 在 估计 正 态 分 布 均值 的 问题 中 , 可 以 用 样本 均值 , 也 可 以 用 样本 
中 位 煞 ， 玉 其 他 一 些 人 计量 自然 地 就 产生 了 比较 不 同 的 判决 函 
数 的 优 劣 的 问题 为 了 这 个 目的 ， 需 要 引进 某 种 能 反 员 这 种 优 劣 
性 的 数量 指标 , 下 面 要 定义 的 风险 冰 数 , 就 是 这 样 一 种 指标 , 

定义 1.4.3. 设 样本 空间 和 分 布 族 为 (2) 才 s, Ps)，0 69, 
判决 空间 为 (多 ,， 收 s)， 损 失 函 数 为 了 (8, 国 , 而 (om 为 一 兰 决 函 
数 ， 册 由 下 式 规 定 的 8 的 西数 且 (9, 及 称 为 判决 函数 3 的 风险 函 
数 

Rl, 3) = ELD, CX))) 


-| £6, SCs dPels), BEB (1.4.1) 


也 就 是 说 ， 风 险 函 数 是 在 采用 判决 函数 5 而 真实 的 参数 值 为 9 的 
情况 下 的 平均 损失 。， 显然 , 风险 愈 小 , 判决 函数 就 愈 好， 

湛 要 指出 的 是 , 由.4. 轧 右 边 的 积分 是 有 意义 的 . 由 于 损失 范 
数 工 关 0 要 积分 有 意义 ;只 项 验 明 ,， (98, 6) 作为 上 的 函数 ,为 
多 se 可 测 ， 出 于 慨 定 了 工人 起 作为 8 的 沙 数 为 罗 。 可 测 ,而 5(%) 
是 ( 受 ， 锥 由 到 《 久 , 绍 p) 的 可 测 变换 ,立即 得 出 上 (9, 5(%)) 作 为 必 
的 承 数 的 及 -可 测 性 ， 还 有 , 在 公式 民 .4. 了 ) 中 ,我 们 并 不 排斥 积 
分 值 为 ce 的 情况 。 因 此 风险 函数 在 某 些 8 处 可 能 取 se 为 值 . 


。 E539. 


最 优 性 准则 .。 设备 和 名 为 同一 问题 中 的 两 个 判决 函数 ,如 


果 
RO, 60) ， 对 任何 EQ, (1 .4.2) 


且 不 等 号 至 少 对 一 个 9E@ 成 立 , 则 采用 浏 决 函数 8: 时 , 其 风险 总 
不 会 超过 采用 8 时 的 风险 ， 且 在 基 些 情况 下 用 81 的 风险 确 比 用 
8 时 小 ， 如 果 我 们 把 风险 的 大 小 作为 衡量 判决 函数 优 劣 的 唯一 依 
撕 ， 册 在 上 述 情况 下 我 们 显然 没有 理由 用 p 而 不 用 3。 因此 , 我 
们 称 判决 函数 3: 一 致 地 优 于 8， 

如 果 存 在 一 个 判决 函数 5， 一 致 地 仿 于 其 它 任何 一 个 判决 画 
数 8， 则 5 称 为 问题 的 一 致 最 优 解 ， 这 时 ,采用 当然 就 有 足够 
的 理由 ， 但 除了 某 些 很 特殊 的 情况 ， 这 种 一 致 最 优 解 一 般 是 不 存 
在 的 、 因 此 ,必须 提出 菜 种 要 求 较 宽 的 准则 。 以 使 出 较 成 为 可 能 . 

例如 ,对 任何 判决 函数 8 考虑 杂 (B) 一 sap RC0, 6) 它 考 示 采 
用 时 所 可 能 遭受 的 最 大 风险 ， 如 果 在 某 项 应 用 中 ,使 这 个 最 大 
风险 尽 可 能 小 是 很 重要 前 话 ， 我 们 就 可 以 制定 如 下 的 准 出 ， 若 
(50 一 (39 ， 则 称 判决 函数 一 优 于 3 若 某 个 判决 函数 8 满 
足 条 件 ， 开 (8 < (8) 对 任意 的 判决 函数 8、 则 称 3" 是 最 优 的 
(站 这 个 冶 则 下 )， 这 个 准则 叫做 Minimax 准则 , 而 在 这 准则 下 的 
最 优 判 决 函 数 8"， 称 为 问题 的 Minimaz 解 ， 关 于 Minimax 解 的 
问题 (主要 在 参数 估计 理论 中 ) 近 三 十 年 来 在 统计 文献 中 有 不 少 讨 
论 ， 

随机 化 判决 函数 。 在 前 面 所 下 的 判决 函数 定义 中 , 一旦 有 了 
样本 m 就 能 得 出 一 个 确定 的 判决 ， 即 5()。 但 也 可 以 设想 这 样 
一 种 情况 ， 当 得 到 样本 “ 后， 我 们 觉得 还 不 足 据 以 选 定 一 个 判决 
尼 而 是 , 依 z 所 提供 的 “情报 "来 分 析 , 有 若干 个 情况 在 不 同 程度 上 
都 有 可 能 性 ， 拿 一 个 笠 单 例子 来 说 ， 设 问题 是 要 检验 和 7 (9, 1 中 
的 9<0 这 个 假设 豆 ， 设 有 iid. 样本 卫 。…， 卫 w 算出 于 =0, 从 
结果 于 一 0 来 看 , 它 既 不 能 说 给 豆 的 忒 立 提供 了 足够 的 支持 反 
过 米 也 如 此 .， 也 许 较 为 合理 的 看 法 是 “ 依 所 得 样本 看 ， 互 成 立 或 
不 成 立 的 可 能 性 是 一 般 大 ”如 果 这 时 必须 作 一 个 决定 , 我 们 可 以 
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考虑 下 硬 的 作法 : 取 一 个 均匀 钢 产 ,投掷 -一 次 , 若 出 现 正面 则 接受 
五 ， 理 则 就 不 接受 百 ， 这 个 作法 反 员 了 上 述 的 看 法 ， 即 从 所 得 的 
样本 看 ,HH 成 立 或 否 的 可 能 性 一 样 大 ， 这 个 例子 中 值得 注意 的 地 
方 是 , 它 引 进 了 关于 在 作出 最 后 判决 时 分 两 步 走 的 粮 法 ; 先 通过 对 
子 的 试验 得 样本 4%， 根据 zs， 我 们 对 各 种 可 能 情况 作 一 个 分 析 , 在 
这 全 分 析 的 基础 上 证 计 一 个 新 试验 , 由 之 最 后 决定 取 那 个 判决 . 

将 这 个 简单 例子 的 想法 珊 以 引伸 ， 就 得 到 判决 函数 概念 的 一 
个 有 用 的 推广 , 即 所 谓 随 机 化 判决 函数 的 概念 . 

定 尽 工 . 和 .和 《随机 化 统计 判决 函数 )， 设 样 本 空间 为 (&， 
军 。)，, 判 次 空间 为 (有 池 四 -个 定义 在 多 x 和 54 上 的 两 数 8 
功 称 为 是 一 随机 化 判决 两 数 , 若 

a. 对 任何 网 定 的 DE 多 so，5c%,，D) 作为 2 的 畏 数 是 饭 。- 可 
测 的 ， 

b. 对 任何 国定 前 mE€ 风 ,8(w,， DD) 作为 卫 的 画 数 是 侈 。 上 的 
概率 测度 ， 

如 果 采 用 随机 化 判决 函数 5, 则 得 出 一 个 判决 忌 的 过 程 为 ; 先 
通过 疯 颖 瑟 得 样本 w 有 了 zx 后 ,依据 8 得 定义 于 罗 o。 工 的 概率 
酒 度 3$(e， 芒 ， 然后 , 依据 这 个 概率 测度 ， 随 机 地 在 多 内 选取 一 
个 判决 。 这 意思 是 : 对 任何 DE 多 s,“ 力 内 的 菜 一 个 判决 被 挑 出 ” 
这 个 事件 的 概率 为 Btz， 功 ， 显然 ， 前 面 定义 的 非 隆 机 化 判决 函 
数 是 此 外 的 特例 ， 即 ， 对 性 何 xE 让 ,概率 分 布 3(w, 巧 集 中 在 
多 中 的 一 个 点 上 《这 个 点 当然 与 z 有关 ， 且 就 是 定义 1.4.2 中 的 
dw)), 

可 能 要 问 ， 引 进 这 样 一 种 抽象 的 ， 且 看 来 有 点 不 大 自然 的 概 
念 , 究竟 有 网 大 意义 ， 在 我 们 叙述 的 目前 阶段 , 还 不 能 引用 诡 多 的 
具体 材料 来 说 明 这 个 问题 。 我 们 只 指出 : 引进 这 个 概念 在 理论 上 
月 一定 的 方便 ， 以 后 我 们 将 在 几 个 场合 下 看 到 这 一 点 ， 认 应 用 的 
观点 看 ， 也 许可 以 说 ， 难 于 设想 这 种 判 快 函数 会 用 到 实际 工作 中 
沁 ， 目 下 ,我们 举 一 个 简单 例子 使 读者 相信 , 这 个 概念 至 少 在 某 些 
性 论 福 问题 中 , 能 提供 一些 新 的 东 证 . 


直 号 有 生 


便 1.4.8， 设 有 一 个 钢 啤 , 只 知道 它 在 投 部 时 ， 出 现 正面 的 柑 
率 是 于 和 闻 这 二 者 之 一 , 但 不 知 是 那 一 个 ， 现 在 将 铜板 投 所 两 
次 而 记 下 了 出 现 正面 的 次 数 六 ， 要 根据 这 个 结果 米 对 二 和 习 这 


两 个 值 作 一 选择 ， 
在 本 人 本 让 为 全 一 10, 二 时， 参数 空间 和 潭 决 空间 


都 是 {了 ,村 }， 分 布 族 中 包含 两 个 分 布 ,分 别 为 


-天 高” = 剧 ， 
P(X -0) =, PX-D ~ Pe(X -2) ye 
人 
1 3 3 1 
于) 和) (1 


加 果 采 用 车 机 化 尖 光 于 < 在 o-0 和 “=2 时 , 当然 应 分 别 取 列 
决 地 和 地, 而 当 s~1 时 , 则 取 可 取 了 王 也 可 取 习 ,因此 在 本 例 中 ， 
全 的 非 随 机 化 决 数 有 两 个 ,分 关 为 
6, (0) 一 于 81(D) ~ 十 4’ 81(2) = 二 
85(0) 一 子 ，55(DD = 王 ，5a(2) = 全 
计算 61, 5; 的 风险 材 数 , 例如 
R(3, 5)=P; (GX ) -Hd = 
R(T 8) -P(X ) -0 或 人 ) -0 
1 于 
和 每。 卫生, -各 (3 )- 坦 
如 果 按 Minimax 准则 , 则 国 


* 有 有 李 


max{ ( 1 , 5,), RS ， 8:) 


-max| 忆 (二 二 ， 5 R 1， 3， ) 一 
这 两 个 判 天 函数 分 不 出 优 劣 . 
现 取 随机 化 判决 函 烙 3 如 下 : 


ao {3}) -32, 全 = 
G 入 -a (9)- 译 


¢ 1 1 
2 | yl- 
16” “i” ~ 
1 9 1 


1 、. . 
8) X14 了 XX 436 ~ -下 


二 5), R(, 5 于， 比 让 小， 位 些 ,在 MinimnX 
淮 唱 之 下 ,全 比 人 有 和 8 部 好 ， 
区 机 化 关 决 画 数 的 风险 胃 数 . 设 样 本 空间 和 分 布 族 为 二 2， 
计算 确 机 和 兹 涧 天 机 数 3 一 #0w, 加) 的 史 险 函数 Rib, 全 
易 见 在 搬 得 样本 人 的 条 件 下 , 5 的 条 性 风险 为 
RO, Slay -| 79 wy i, on， ‘1 .4.3) 
为 多 中 的 流动 点 ， 国 此 ,注意 到 站 服从 分 布 P，， 得 
RG, 全 -| BO, id 


-| Po i L(0, odle, do)|, (1.4.9) 


要 这 个 定义 有 效 ， 必 须 验 证 ，《I.4. 各 和 {I.4. 攻 的 积分 部 有 
意义 ， 由 于 所 涉及 的 函数 都 非 负 ， 只 句 验 证 有 关 沙 数 的 可 测 性 . 
上 (Ww) 作为 中 的 函数 为 多 os- 可 测 ， 这 在 损失 函数 的 定义 中 已 有 
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候 定 ， 故 积分 (1.4.3) 有 意义 ， 要 证 (1.4. 信 中 的 积分 有 意义 ,要 
验证 , RC9, 81) 作 为 «的 丙 数 为 乡 。- 可 测 ， 也 就 是 说 ,对 任何 非 
负 5gur- 可 注 的 Fe) ,函数 

9 四 = at do) 
为 多 w- 可 测 ， 当 fo) = 了 oo， 万 En 时 ，g( 全 一 5(e， 卫 为 


用 as- 可 测 ， 这 一 点 在 随机 化 判决 函数 的 定义 中 已 要 求 了 ， 于 是 按 
例 行 的 证 法 , 由 此 推 到 了 Cw) 为 非 负 简 单 :及 o- 可 测 ， 为 非 负 多 o 


可 测 及 -- 般 的 乡 s- 可 测 的 情 况 (当然 ， 要 求 对 任何 %E 作 积分 
] .75G do) 有 意义 ). 


$1.5. 充分 统计 量 

(一 ) 统计 是 

统计 问题 的 原始 资料 是 样本 zs，2 一 般 有 (mm …，m) 的 形 
式 , 每 个 x 都 是 一 个 实数 .在 解决 一 个 具体 问题 时 , 往往 需要 从 
这 些 数据 gm，…， 和 算出 一 些 有 美的 量 ， 通 过 它们 去 解决 所 提出 
的 问题 ， 这 个 概 您 ， 凡 是 接触 过 一 点 初等 统计 的 人 都 是 清楚 前 ， 
拿 最 常 殉 的 一 个 问题 来 说 ， 设 = (ta) 为 iid. 
样本 ,2 的 分 布 为 六 tw, o”)， 和 需要 估计 & 和 和 go?， 这 时 我 们 从 样本 
算出 


对 -二 字 ?= 一 Tw 及 3 
t=1 


合 它 们 去 估计 4 和 o?， 如 果 要 求 4 的 区 间 售 计 ， 则 常 杂 用 形 如 
[z 一 0s, 4 十 6 的 区 间 (6 为 适当 选择 的 与 % 有 关 的 常数 )， 这 里 县 
和 江都 是 通过 原始 样本 2 一 (wx …，w) 算出 的 量 ， 这 神 量 就 叫 
效 统 计量 ， 必需 明 区 的 是 , 统计 量 只 能 与 样本 有 关 , 桓 不 能 依赖 未 
知 的 参数 9， 拿 上 例 来 说 ,二 褒 (%, 一 ) ?就 不 是 一 个 统计 量 ， 因 
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为 它 依赖 未 知 的 参数 &， 我 们 光 法 从 样本 z= (二 …, 加 ) 算出 
二 守 (a.- ?之 值 ,但 是 ,如 加 在 某 个 问题 中 4 认为 是 已 知 
的 , 则 二 凡人 一 o): 就 可 以 作为 一 个 统计 量 . 

在 前 节 中 我 们 定义 了 非 随机 化 判决 通 数 8co)、 它 是 定义 于 
样本 空间 多 上 到 值 子 羯 决 空间 贸 的 函数 ， 一 - 旦 有 了 样本 就 
可 算出 608)， 明 然 66 不 必 是 一 实数 或 实 向 量 , 但 这 无 关 紧 要. 
因为 统 并 量 定 义 中 报 重要 的 一 点 是 它 只 与 样本 = 有关， 所 以 ,一 
切 非 随机 化 判决 函数 都 是 统计 量 ， 内 此 着 出 , 在 统计 推 疡 理论 中 ， 
我 们 主要 就 是 和 种 种 统计 量 打 人 交道， 即使 对 次 进行 观察 的 归 的 
主要 不 在 寺 尔 后 进行 绕 计 挫 断 ， 但 单纯 为 了 适当 地 找 述 抽样 的 结 
果 , 常常 也 有 必要 使 用 统计 芋 , 最 简单 的 如 平均 数 . 百分比 之 商 , 以 
便 清 想 地 把 本 质 的 示 西 反映 出 来 

下 面 我 们 给 统计 量 下 一 个 下 式 的 定义 . 

定义 1.5.1， 设 样本 空间 为 ( 哆 ， 绍 4)，(, 沼 力 为 一 可 测 空 
间 、 从 ( 朗 ， 交 x) 刘 (F， 小 的 一 个 可 测 变 换 1(z) 称 为 统计 量 . 

在 这 个 一 般 定 义 中 有 两 点 值得 注意 ， 一 是 昌 在 统 大 多 数 实 用 
问题 及 很 多 理论 问题 中 ，( 久 ， 姓 w) 和 (CF 2 都 是 欧 氏 的 , 但 统 
计量 的 定 关 中 并 不 又 求 这 一 点 举 一 个 例 . 

例 1.5.1. 设 ( 从 ， 幼 w) 为 样本 空间 , {Ps。09E8} 为 其 上 的 一 
族 概 率 分 布 ， 设 几 为 多 上 的 o- 有 限 测度 ， 而 {Dy, 4 E96} < 
记 fw, WD =aP, (Ww /dr. 

以 记 一 切 定义 于 日 上 的 实 值 医 数 的 会 休 所 成 的 空间 ， 害 
义 一 个 由 多 到 多 的 变换 如 下 : o> 及 (四 ,其 中 (6) -Fe 有， 
6E6， 为 了 村 这 个 变换 ( 记 为 1(2)) 成 为 一 个 统计 量 ， 必 须 在 条 
中 引进 一 个 适当 的 o- 域 ， 在 这 里 没有 一 个 显然 的 选择 , 我 们 可 以 
这 样 办 ; 称 万 GE 有。 车 {zt(w) ED} Es， 由 一 切 这 样 的 所 构 
成 的 Bs 品 然 是 o- 域 , 而 Ha) 显 为 ( 儿 ， 儿 ) 到 (7, 雪 ) 的 可 测 
变换 ,因此 在 建立 这 个 结构 后 , Cs) 可 以 看 作 古 一 个 统计 量 ， 然 而 
它 所 取 的 值 是 函数 
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另 一 点 值得 注 党 的 是 在 定义 一 个 统计 基 时 ， 需 要 提出 相 皮 的 
多 ;， 可 以 举 出 这 榜 的 例子 , 其 中 至 ， 罗 we，2 和 拓 们 都 一 样 ， 顷 。 
不 一 样 ， 而 统计 量 的 性 质 有 重大 差别 、 不 过 , 在 最 常见 的 情况 中 ， 
tt%) 总 是 在 欧 氏 空间 中 取 值 ， 这 时 腔 > 总 选择 为 相应 的 均 。 因而 
不 致 发 生 上 述 问 题 ， 

设 在 样本 空间 (他, 绍 ~) 上 定义 了 一 族 概率 分 布 {Ps, 6€@}， 
i(2) 为 统计 量 ， 把 ( 池 ， 轨 sw) 变 到 《3 绍 y)， 则 {Po, 8E8} 通过 
t(4)， 在 (7， 名 s) 上 导出 了 一 族 概率 分 布 {PY, OE€6}: PE(B) = 
Poti"1(B)) 对 任何 BE 绍 y 及 08E6B， 有 时 为 了 如 免 温 浇 , 也 用 PY 
来 记 了 的 概率 分 布 , 但 不 必 拘 沁 于 此 .具体 地 (根据 {了 6, 8& 9} 
和 ws)) 定 出 这 个 导出 分 布 是 统计 理论 中 一 个 重要 的 然而 往往 是 
很 因 难 的 问题 . 


(二 ) 充分 统计 是 的 概念 


充分 统计 量 的 概念 是 数理 统计 的 重要 的 基本 概念 之 一 ， 为 了 
使 这 个 比较 难 的 概念 接受 起 来 容易 些 ， 我 们 先 作 一 些 直 观 性 的 解 
释 , 然后 再 给 出 它 的 严格 定义 ， 

设 给 了 (多, 名 sg Po), 96E8, tm) 为 一 个 统计 量 ， 取 值 于 
(了 压 y) 、t 的 概率 分 布 为 族 {PE, 8E 人 M， 统 计量 f(%) 可 以 看 成 
是 对 原始 资料 即 样本 4 的 一 种 加 工 , 设想 我 们 在 经 过 这 个 加 工 后 ， 
就 把 原始 资料 w 丢掉 ,而 只 保留 了 ta、 这 在 数学 上 说 , 无 异乎 用 
新 的 概率 空间 (F, 绍 ,，Pi)，8E6 代 蔡 原来 的 《和 ， 鹃 <，Po)， 
EGG 一 大 堆 原 始 资 料 * 经 过 加 工 成 比较 简单 的 iCw) 后 {例如 ， 
把 100 个 数据 加 工 为 其 算术 平均 ), 坷 以 设想 一 般 说 来 在 信息 上 会 
有 所 损失 ， 即 在 原始 资料 名 中 所 包含 的 茶 些 有 关 下 的 分 布 , 或 黎 
句 话 说 , 有 关 和 参数 9 的 信息 , 经 过 将 加 工 鸭 i(w) 后 丧 炎 了 .这 意 
味 着 ， 从 (9 ， 氏 mw Pb6E@ 这 个 模 型 出 发 对 0 进行 担 断 ,在 质 
其 上 达 不 到 从 原始 模型 出 发 所 作 的 推断 ， 但 是 ， 也 可 能 把 = 加 工 
为 (9) 时 抓 住 了 问题 的 实质 ， 即 i(s) 中 保存 了 4 中 所 舍 ( 关 于 团 
.的 全 部 信息 ， 妥 掩 的 只 是 一 些 匹 关 要 导 的 东西 。 如 果 -… 个 统计 量 
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t( 必 满足 这 个 条 件 , 它 就 称 为 充分 的 . 
下 盏 的 例子 也 许 有 助 于 读者 的 理解 . 
例 1.5.2. 一 事件 4 的 概率 为 如 0<6 志 1， 作 nm 次 独立 试 
验 , 第 忆 次 试验 的 结 朵 为 天 及 一 CR a 让 1， 其 中 太一 了 或 
0, 视 第 次 试验 中 事件 4 出 现 与 否 而 定 ， 这 时 样本 空间 党 包 合 
2 个 点 Go 2 ;每 个 各 可 取 人 和 23， 分 布 族 为 
PetR 一 2 = P(X "7 non) 
= Dn, Ol. .6.D 
其 中 各 为 zw 中 十 的 个 数 , 
现在 考虑 太一 器 十 … 十 xz， 即 事件 4 在 7 次 试验 中 一 共 出 
现 的 次 数 ， 从 直观 上 看 有 充分 的 理由 认为 : 这 个 统计 二 包含 了 原 
始 数 据 = ta 2 中 所 售 的 有 关 吕 的 全 部 作息 ,因为 ca 
wn) 比 2 更 详细 的 地 方 ， 在 于 它 指出 了 事件 是 在 那 才 次 试验 
中 发 生 的 , 由 于 各 次 试验 是 在 同样 条 件 下 独立 他 进行 的 ,在 知道 了 
二 出 现 的 总 次 数 后 ， 再 其 道 上 达 细 地 赴 米 不 会 玫 助 我 们 对 8 的 了 
解 . 就 是 说 , 有 理由 认为 是 充 分 统计 让 . 
1 的 样本 空间 为 .也 和 1 ?其 分 布 为 二 项 分 布 : 


DA 人 m0, 工 De 
(4.B. 
这 样 ， 采 用 统计 量 i(z), 等 于 用 .代替 原来 的 作 ， 而 以 民 .5. 
代 禁 (I.5.1)， 我 们 预期 , 虽然 经 过 这 个 简化 ,% 中 包含 的 有 有关 站 
的 硼 乱 并 无 任何 赤 拓 ， 

大 白 了 以 虐 所 述 , 我 们 就 可 以 进一步 分 析 这 个 闻 题 ; 统计 基 t 
必须 洲 足 什么 条 件 才 能 有 上 述 意 义 下 的 充分 年 ? 可 以 设 轧 这 样 一 
个 模式 : 

外 中 所 食 的 信息 一 上 中 所 食 的 信息 上 + 在 知道 二 以 后 ， 
w 中 尚 含有 的 剩余 信息 .， 


a 


2 
2 
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(人 .5. 呈 
拿 一 个 最 简单 的 情 识 来 讨论 ， 证 下 ,了 都 是 一 维 变量 ,其 联合 密 
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度 汶 疡 人 防 ， 昌 为 参数 .以 广 网 和 产 如 | 网 记 大 的 密度 和 在 给 
定 耳 =z 时 了 的 条 件 密度 ， 则 fo, 芒 一 fotw) fey|z)， 由 于 
( 咏 中 所 含 8 的 信息 全 总 结 在 密度 fots%, 俯 中 , 也 就 是 说 , 爹 包 
食 在 部 (ty| 臣 中 。 知道 了 % 和 相当 于 在 分 布 族 {fs Cm)} 中 作 了 
抽 群 , 因而 有 关 fo(2) 的 屠 部 分 信息 全 在 x 中. 这样 就 本 例 而 言 ， 
CL.6.8) 右边 第 二 项 应 该 是 指 在 foty12) 中 的 信息 ， 知 道 y 灿 当 
于 在 分 布 族 {jfoety[z2)} 作 了 拍 样 。， 部 杂记 (y! 翅 确 : 与 8 有 关 , 则 9 
中 自然 可 能 包 会 有 关 8 的 信息 , 反 过 来 ,车 oD 与 #8 无 关 , 则 y 
相当 于 [在 已 知 % 的 条 件 下 ) 从 一 与 9 无 关 的 己 知 分布 中 的 抽样 . 
这 种 样本 中 自然 不 会 包含 如 的 任何 信息 ， 因 此 在 这 个 简单 例子 
中 ， 将 原始 梓 本 人 , 妥 辑 工 为 & 后 信息 是 否 形 失 ， 就 看 fy) 是 
否 与 8 有 关 ， 

将 这 个 简单 例子 加 以 引伸 ， 就 得 到 充分 统计 量 的 一 般 年 义 ， 
那 就 是 , 具有 在 给 定时 互 的 条 件 分 布 与 日 无 关 , 1 才 是 充分 的 . 
事实 上 上， 从 上 述 分 析 可 和 佐 ， 正 是 在 这 个 条 件 分 布 中 包含 了 民 .5.3) 
右边 第 二 项 所 述 的 铀 余 信 息 ， 当 这 条 件 分 布 与 8 无 关 时 ， 和 剩余 信 
息 不 存在 , 丽 所 含有 关 8 的 信息 , 全 包含 在 i 中 ， 

这 样 ,应 用 8IL.3 中 所 握 述 的 条 件 概率 的 理论 ， 可 将 充分 统计 
量 的 严格 定 头 给 出 如 下 ; 

定义 1.5.2. {充分 统计 量 的 定义 )， 设 有 (人 党， 内 s，Po)， 
9B, tir) 为 统计 量 ， 取 值 于 CF 副 四 ，{PY,， 0EgB 为 导出 分 布 
族 . 如 果 存 在 一 个 与 8 无 关 的 了 P(A4| 介 ( 定 义 于 绕 wX .71, 臻 

a， 对 固定 的 4E 写 w， 了 (4 上 国 作 为 反 的 困 数 ( 取 值 了 于 局), 为 
鹃 so 可 测 的 . 

b、 对 任何 4E 家 。，BES8r 及 8E6, 有 

PCdnmiriCB)) -| P| aPY (6， (1.5.4) 
则 称 # 为 一 充分 统计 量 (更 确切 地 ， 关 于 分 布 族 {Lo, 2968 的 充 
分 统 讨 量 ) 考 虑 到 81.3 中 所 给 条 件 概 率 的 定义 ,这 无 异乎 说 ， 当 
站 的 分 布 为 P 时, PL4| 轨 是 给 定时 芳 的 条 件 概率 分 布 ; 对 性 
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何 8E 日 者 对， 因为 了 (4 与 #9 无关, 这 就 是 说 , 在 给 定 ( 知 道 ) 
t 后 , 了 的 条 件 分 布 己 不 再 和 有关 ， 这 样 ,定义 1.5.2 以 精确 的 
数学 语言 表达 了 前 而 所 作 的 直观 分 析 的 要 点 . 

当 ( 区 ， 稚 。) 为 欧 氏 样本 空间 时 , 在 定理 工 .3.1 中 我 们 证 明了 
正则 条 件 概 滨 存 在 .次 似 的 结果 在 这 里 也 成 立 ， 

定理 1.5.1， 在 定义 1.5.2 的 记号 下 ， 若 + 为 充分 统计 量 匡 
(六,， 哮 z) 六 欧 氏 样本 空间 , 则 存在 PCA] 旭 , 除 潢 足 定义 .5.2 中 
的 条 件 sa,& 外 ,还 满足 如 下 的 条 件 : 对 任何 tE 池 ,了 CA 全 作为 4 
的 函数 ,是 膏 s。 上 的 概率 测度 , 

证 . 本 定 埋 的 省 基 与 定理 1.83.1 前 证 闪 守 全 一 样 ， 只 需 注 
意 ， 几 于 芋 的 充分 性 ， 导 .38.2 所 定义 的 耳 tty,，…, tn; 如 及 由 此 
导出 的 天 CA, 妨 符 ,都 与 9 无关， 

下 向 考虑 两 个 例子 ， 

例 1.5.3. 考 忠 例 1.5.2， 易 见 

PalR =% tls) =to) 一 有 (下 1 一 0 在。 一 | 一 1 


一 n,(> 三 ,一 机 三 4 一 Wl 广 ， = ) /Ps (SX, 一 tw) 
后 A 右 


0， 若 各 十 … 十 wn 天 f0， 


一 oO5o 人 oa 人 


to 


着 十 4 一 机， 

这 与 9 无 关 , 因此 依 定 义 1.5.2, ts) 是 充分 统计 量 . 

例 1.5.4. (次 序 统计 景 的 充分 人 性) ， 考虑 例 1.3.3 前 情况 , 其 
中 多 = (wm), 样 杰 空 间 为 (全,， B20) 一 全， 过) ， (7 Hy) 
的 意义 如 在 全 I.3.3 中 说 明 的 ，# 0) 一 tw 一 (wy，…， 
“0)，aa am 的 意义 也 见 该 例 ， 这 个 重要 的 统计 量 #(o) 称 
为 "次序 统计 量 ” 在 统计 中 有 许多 应 用 (参看 8 6.1) 

设 {P。, 0E8) 为 定义 在 2s 上 的 一 族 概 六 分 布 ,对 任何 9€ 
测度 Po 为 对 称 测度 ( 见 例 1.3.3 前 面 的 说 明 )， 这 时 ， 如 在 例 
1.3.8 中 证 明 的 , 对 任何 定义 于 人 上 的 、 积 分 ，/o)dP,( 四 存在 
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的 隙 数 了， oC () | 人 等 于 一 个 与 8 无 关 的 9 从 ( 见 (1.3.10)) 
特别 ,了 到 了 (2?) 一 了 a(tw) (4E 才 a), 看 出 Ps(4| 罗 与 如 无 关 .， 因 此， 
在 分 布 族 {ee 98€ 信 对 称 时 ,次序 统 计量 上 是 充分 统计 景 ， 特别 ， 
若 下 一 (有 bp 有 而 号 下 为 fd， 则 支 的 分 布 显然 
对 称 , 由 此 推 知 ，iid. 样本 的 次 序 统计 量 必 为 充分 前 . 

由 以 上 两 例 看 到 , 要 证 明 一 统计 基 的 充分 性 , 如 直接 从 定义 出 
发 , 则 涉及 复杂 的 条 件 概率 的 计算 , 这 是 很 不 方便 的 ， 以 下 在 (四 ) 
中 ,我 们 要 指出 一 个 很 强 有 力 的 判定 充分 性 的 定理 , 由 之 可 以 很 容 
锚地 验证 许多 常见 统计 景 的 充分 性 ,因此 , 我 们 把 其 它 例子 留 到 那 
里 去 考虑 . 

在 结束 这 一 段 以 前 我 们 指出 一 个 简单 事实 ; 

引 理 1.65.1.， 阁 大 下 ) 在 分 布 族 {( 且 ;多 w，Pa， 0EN) 之 下 
为 充分 统计 量 刺 全 CC@, 则 它 在 分 布 族 长 县 ， 用 w， 加 ，9EG 之 
下 ;也 是 充分 统计 基 . 

这 显然 是 定义 1.5.2 的 直接 推论 . 


(三 》 充 分 性 原则 


前 而 我 们 给 出 子 充 分 统计 量 的 严格 定义 ， 这 个 定义 的 直观 背 
景 ， 就 是 在 于 “36 保留 了 “中 所 食 关 于 8 的 全 部 信息 量 ” 一 语 . 
然而 ， 在 前 面 我 们 并 未 给 “信息 量 ” 这 个 概念 下 严密 的 数学 定义 . 
我 们 内 基 借用 这 个 答 统 的 带 直观 性 的 概念 ， 然 后 就 转 到 给 定时 
六 的 条 件 分 布 的 考 患 、 在 这 一 段 中 我 们 要 更 仔细 地 分 析 一 下 这 
全 问题 ， 从 而 其 另 一 个 侧面 对 充分 统计 量 这 个 重要 概念 非得 更 深 

我 们 指出 过 ， 引 进 统 计量 + 相当 于 把 原来 的 (化 ， 络 ws， 了 Ps)， 
8EH 弃置 不 左 , 府 改 从 (多 , 泛 z,， 了 3), 9E 合 出 发 。 设 给 了 一 定 的 
统计 交 决 问题 .这 意味 着 给 定 了 一 定 的 判决 空间 , 损失 函数 等 等 )， 
在 在 模 型 下 取 任 一 个 判决 诅 数 5, 可 算出 其 风险 苑 数 中 届 6). 在 
新 模型 ( 即 (G ， 嚼 "， P39) ,8E@) 下 取 任 一 判决 函数 合 , 也 可 算出 
其 风险 函数 五 已， 8)。 如 果 对 原 模 型 下 任 一 判决 函数 8， 必 存在 


s 合生 
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新 模型 下 的 一 个 判决 画 数 5°, 至 
RG, DRO, 6) 对 一 切 8EQ. 

那么 , 就 所 提 的 问题 而 言 , 凡是 从 原 模 型 出 发 所 能 作 到 的 一 切 , 从 
新 模型 出 发 也 能 作 到 如果 这 个 情况 对 任 舍 统计 关 决 问题 (当然 ， 
指 关 于 推断 如 的 阿 题 ) 都 成 立 , 那么 ,用 新 模型 (49 ， 及 = 了 PD),9E9 
民营 原 模型 ( 计 ， 乡 wz，Po), 8EB, 不 会 使 我 们 在 任何 有 关 日 的 推 
斯 问题 中 处 于 更 不 利 欧 地 位 , 这 时 我 们 就 有 充分 理由 说 , ti(%) 保 留 
了 % 四 有 关上 用 的 所 有 信息 如果 情况 不 是 如 此 , 那么 在 换 成 新 模 
型 后 , 在 某 些 关于 乡 的 推断 问题 中 , 可 能 就 达 不 到 在 原 模 型 中 本 来 
能 达到 的 良好 结果 这 时 就 没有 理由 认为 , to) 保留 了 2 中 所 包 
会 的 有 关 台 的 全 部 信息 . 

下 面 我 们 要 证 明 ， 如 果 许 可 使 用 随机 北 羯 决 画 数 ， 那 么 当 一 
统计 量 在 定义 1.5.2 之 下 为 充分 时 ， 它 必然 在 刚才 所 述 的 意义 下 
保留 了 w* 中 所 含 的 全 部 信息 ， 这 个 重要 结果 就 是 所 谓 “ 充 分 性 原 
则 . 

定理 十 565.3. (充分 性 原则 ).。 (2 8x, Po), OEO, i(w), 
(Fr 了 Py), 9898 的 意义 如 前 假定 定理 1.5.1 中 所 述 的 正 
则 条 件 概 率 存 在 。( 作 ， 煞 为 判决 空间 ,了 (98, 四 为 损 兴 函数 ， 则 
对 任何 判决 蔓 数 Bo， 人 力 ， 几 存在 判决 函数 全 忆 DD), 致 

Bd, = RRO, HH， 对 一 切 0E8. 

证 . 以 刀 (4, 区 记 定 理 1.5.I 中 提 到 的 正则 条 件 慨 率 .。 设 

给 定 了 8 lw, DD》， 定义 人 二 及 如 下 : 


SG, D) ~ | 83%, PQ, ©. 


容易 看 出 , S(t, 卫 ) 的 确 满 足 我 们 在 前 面 所 给 的 随机 化 判决 画 区 
的 定义 .实际 上 , 第 一 个 条 件 , 即 给 定时 部 ( 功 为 多 ow 上 的 机 
这 测 度 , 直接 由 (wD) 为 随机 化 判决 函数 得 出 ， 第 二 个 茶 件 ， 见 
给 定 了 E 妇 时 了 GD) 为 1 的 约 :- 可 测 函 数 ， 掏 由 前 面 几 次 合 
用 过 的 例 行 推理 方法 得 出 ， 

由 公式 过 .本 和 有 


s Co = 


Rg, 的 一 4P8 的 | £0, o)8' Cs, do) 
-| ze@， 由 | BC do)aPr() 
-人 |.ze， 由 | [se dow) Q do, 1) laP? GO) 


-| ze a) | sc ao Qldw, aPT 的 ， 
(1.5. 
由 于 被 积 函数 都 非 负 , 以 上 积分 次 序 的 变化 依 Fubini 定理 是 合法 
的 . 便 击 怠 的 意义 :有 


J, bdP8@= Polds) -ap 人 O. 
以 此 代入 (I.5. 六 ,得 
RG, 5) = | 五 但 | 3(%, doydPo(g) 


=| aPs(o)| ,LG, ole, do). (1.5.0) 


人 忧 公 式 辽 .4. 仿 ，(I.6. 人 6 的 右边 就 是 五 (9, 名 ,因此 
RO 67) = 且 (, 5)， 对 任何 8E9, 

从 而 证 明了 所 要 的 定理 . 

很 容易 举例 说 明 ， 如 果 只 人 允许 非 随 宙 化 的 判 天 函数 ， 则 定理 
1.5.2 中 所 表述 的 充分 性 原则 店 必 成 立 ， 

例 工 .5.5. 考虑 例 1.4.8, 但 作 如 下 的 改变 , 就 是 样本 包含 两 
次 试验 的 结果 而 不 止 是 两 次 授 指 出 现 正 面 的 和 ， 这 时 样本 空间 包 
售 四 个 点 ( 坪 五 ， 瑟 辐 五 , 了 7)， 其 中 例如 , 吾 于 表 “ 第 一 次 出 正 
面 , 第 二 次 出 反面 "这 个 结果 , 余 类 推 ， 其 他 没有 变化 。 这 时 , 分布 
笑 中 前 本 个 分 布 训 为 


六 (HH) Pr(HT) = P; (TH) -i Pi CT ~ 


PHH) -Tg, Pi(HT)=P, (TH)~ 6 Py 《PT) -二 


人 ’ Er ’ 
引进 统计 最 号 t= 两 次 投 据 出 现 正面 之 和 ， 易 见 : 为 充分 统计 量 . 
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这 根据 例 1.5.3 及 引 理 工艺. 工 立 即 得 出 ,也 很 易 直 接 验 证 ， 在 转 
化 到 后 , 癌 题 就 回 和 到 与 何 工 4,8 完全 一 样 的 情形 , 在 那里 我 们 已 
见 到 ,车 只 允许 非 随机 化 判决 函数 , 则 任何 判决 函数 的 最 大 风险 不 


能 低 于 然而, 如 果 从 本 例 所 维 的 模型 出 发 , 取 判 决 函 数 8 如 


下 ; 
HH) 8HT) -于 ， STHY) = 3 -了 


则 很 易 算出 ,8 的 最 大 风险 只 是 子 ， 比 -5 小， 因此, 在 原 模型 下 


能 做 到 的 事情 , 在 新 模型 下 不 一 定 能 作 到 . 
如 在 例 1.4.8 中 指出 的 , 车 锡 许 随机 化 , 则 从 # 上 出 发 也 可 把 最 
大 风险 降 到 /4 


《四 ) 充分 性 判定 准 到 一 一 分 解 定理 


前 面 已 指出 ， 直 接 用 定义 1.5.2 验 证 统计 基 的 充分 性 是 不 方 
便 的 。 下 FF 的 定理 在 很 普遍 的 稍 况 下 给 出 了 充分 性 的 简单 验证 方 
法 , 是 一 个 很 重要 的 结果 ， 

定理 1.5.8. (分解 定理 )，。 设 ( 季 ， 朋 ws。 Po ，9E 为 斑 的 
样本 空间 和 分 布 族 ，tKan 为 统计 自 ， 取 值 于 (2 ， 下 )， 设 { 
EO} Kp 为 族 z 上 的 o~ 有 限 测度 ， 记 了 tr, 有 一 dz /dn 
别 所 为 充分 统计 量 的 充 要 条 件 是 :存在 定义 于 只 上 的 非 负 罗 e- 
可 油 潜 数 六 (Ww) 及 定义 于 了 x 和 日 上 的 函数 gt 内， 使 对 任何 辣 定 
的 EB, gt 从 为 1 的 非 负 当 ;- 可 测 请 数 , 至 

了 (Go WD = HR), Ca. 6. 1), C1.65.7) 
对 任何 8E 全 (生计 集 可 与 9 有 关 ). 

由 全 .5.7) 看 到 ,密度 f(s 站 分 解 为 两 部 分; 其 一 通过 fw) 依 
赖 于 z, 男 一 与 无关， 这 是 本 定理 名 称 的 由 来 . 

在 证 明 这 定理 前 我 们 先 举 儿 个 俩 子 ,以 胜出 其 广泛 应 用 . 

例 1.5.6， 设 下 一 ( 尼 1，… 五， 瑟 1，…， 下 为 id.， 侧 定 
[i 

* .67 ， 


aa<eo, 0<oe<so， 碍 后 一 场合 ， 参 数 为 = (g, 5 )， 若 以 睛 记 
各 上 的 也 测度 , 则 王 的 密度 为 ; 
在 情况 《i): 


filw, 0) = (2m) roxp( ~ 0)), 
在 情况 (i); 
falw, 0) — Qnod oxp( ~ Hr So 0?) 
它们 分 别 可 表 为 
filw; 0) =| QQm) "0 "0 oxp(S nr OVlezp( -Ss /2), 


fw, = | (Dr ng M2 exp( _ 
= [ (2m0") 3 exp{ 一 
-总 Go] 


因而 由 分 解 定理 知 : 在 情 况 (i)，t(XY) 一 启 互 ,为 充分 统计 量 ,而 
在 情况 (2)， 


i(X) (SZ 习 工 》 
或 与 之 等 价 的 (六 (7 ,一 站)” 忌 尹 是 充分 统计 量 . 

例 了 .5.7。 设 区 的 分 布 族 为 指数 族 (1.2. 必 ， 则 由 Pa, 仿 的 
形状 , 由 分 解 定理 立即 得 出 : 统计 量 {(X) ~ (Pi( 及 ),…, T,(X)) 
为 充分 统计 量 ， 由 这 个 重要 事实 可 推 知 许多 常见 统计 晤 的 充分 
性 , 包括 上 例 在 内 . 

根据 充分 住 原则 , 我 们 可 不 用 原来 的 也 模型 而 用 + 又 依 引 
理工 .3.3( 见 过 .3.28) 式 ), + 对 菜 个 o- 有 限 测度 y+ 有 密度 族 

Oorp(2 om), 9€0. C1.5.8) 
用 这 个 方法 我 们 又 把 指数 族 的 一 般 形式 必 了 进一步 的 简化 ， 这 个 
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最 简 形 式 民 .5. 蚊 常 作为 理论 研究 的 出 发 点 . 

例 1.5.8. 设 让 = 9 站， 有 1 为 于， 大 1 
的 分 布 为 (i)， 牙 :~BRO0, 急 ，8>0(Bta 的 表 区 间 [e, 的 上 的 多 
名 分 布 ), 或 4 让， 站 1 一刀 (9 9)， 一 ce 区 仙 二 矶 和 ce， 在 后 一 场 
合 ， 参 数 为 8- (而, 如 )。 若 以 & 记 二 上 的 工 测度 ; 则 去 的 密度 
为 : 在 情况 ti)， 


Fil, ©) -人 当 Omin {sy 2 ax 
0， 其 它 % 
而 在 情况 iD， 
(一 上 当 和 min{my 和 ， 2 
fm, | Max {m,n} 去 外， 
0, 具 它 &. 


因此 ， 由 分 解 定理 立即 得 出 : 在 情况 \， 区 的 一 mazfza， …， Ya} 
为 充分 统计 量 ， 而 在 情况 人)，1 C2) 一 imin {om 
max1wm1，…，wnj}) 为 充分 统计 量 . 

分 解 定理 可 以 用 到 出 上 述 诸 例 更 为 复杂 的 情况 .作为 一 个 例 
子 , 我 们 留 给 读者 诈 明 : 例 1.5.1 中 的 统计 其 i(s) 是 充分 统计 量 . 

下 面 我 们 转 到 分 解 定理 的 证 明 ， 首 先 提出 下 述 的 注意 .、 设 
2 上 必 为 (党 ， 需 e) 上 的 两 个 测度 , 上 为 gc -有 限 ， 若 2” 穴 册 而 少 为 
各 sg 的 子 ec- 域 , 则 是 然 当 天 看 作为 乡 上 的 测度 时 , 也 有 vz 所 启 ， 
故 若 吴 在 绍 上 也 o 呈 -有 限 ， 则 我 们 可 定 出 两 个 Radom-Nikodym 
导数 ,其 一 为 将 », 凡 故 作用 es 上 的 测度 所 定 出 的 , 记 为 广 ()、 荔 
一 为 将 w， 严 看 作 罗 上 的 测度 所 定 出 的 ， 记 为 fs(w)， 这 两 个 导 
数 不 是 一 国事 ， 前 者 只 基 雪 o- 可 测 而 不 必 有 琢 可 油 ， 后 者 为 级- 
可 测 因而 必 为 Zo- 可 测 ， 但 前 者 满足 | 疡 (o)du= (4) 对 任何 
4 所 多 zs 击 对 后 者 言 ,类 拟 的 公式 只 对 4E 雪 才 成 立 ， 为 了 分 别 
这 二 者 , 可 记 为 

fC0) = dp 0) /AB), fl) = (0) /du (8), 

另外 ;我 们 注意 下 述 事实 ; 车 {ns mm 一 汪 2 为 乡 上 的 一 申 有 


= HO» 


限 非 零 测度 《好 0 过 pw《 健 ) 之 00 对 一 证 史 ， 则 存在 过。 上 的 桔 率 
测度 和 ， 致 
A -0 jm(d) 0 对 一 切 各 


[ 
1 


事实 上 ,只 需 取 和 (4) = 总 而 ty (4) 对 任何 4E2o。 最 
后 , 我 们 需要 下 面 的 引 理 ， 

引 理 1.6.2. 着 {Ps, 6E 6} ep 这 里 了 为 多 = 上 的 概率 测 
度 , 耐久 为 乡 。 上 的 o- 有 限 测度 ， 则 必 存 在 日 之 一 有 限 或 可 列 集 
{0s, “路, 致 

Po 有 一 0 对 一 切 n 坊 Pol A) 一 0 对 一 煞 8E98. 和 5. 的 
由 这 个 引 理 结合 刚才 提 到 的 事实 即 知 ,存在 形 如 
%=D oPe, C020, 0=1), (1.5.10) 
X(d 0 Pet4y=0 对 一 切 0E@ .5.11) 
我 们 把 这 引 理 的 证 明 放 到 本 段 未 尾 . 

分 解 定理 的 证 明 。 取 形 如 (1.5.10) 的 往 率 测度 X， 满 足 
01.521D， 记 奋 (o 除 一 4Ps(@) /4A(8s)， 我 们 先 证 明 ，z(@) 
为 充分 统计 量 的 充 要 条 件 为 ， 存 在 满足 分 解 定理 中 所 述 条 件 的 
9 从 ,至 

Pw, Dyin), DD, (8. 0. 72)， {1.5.12) 
对 -- 急 9E@( 例 外 集 可 与 9 有 关 )， 

先 设 + 为 充分 , 则 存在 与 9 无 关 的 条 件 概率 PC41， 使 对 任 

僻 4E5Bs 和 BE 女 ， 有 


| PADaPI) ~ PAANB)). (1.5.18) 
此 处 PF 为 P 经 共 ) 导 出 的 测度 ， 利 用 引 理 1.3.3， 这 等 价 于 
[Palt(ew))aP,e) = PCdn4 (1.6.14) 


对 任何 45 及 doE 扩 (党 ) = 售 己 多 x, 以 下 我 们 用 代 .5.I4) 
代替 对 .5.13)。 册 代 .5.1 ,注意 和 的 形状 在 .5.10)， 易 兄 


下 


| PiA tar ~ NAN AD, AE Ha, AoEB .5.15) 


， 故 即使 (名 乡 2) 上 的 概率 测度 换 为 了 PL41 让 仍 为 给 定 1 时 的 条 
件 概率 ， 沁 got) 一 CPP /和 (30)， 则 内 gr(w) 为 多 0- 可 测 ， 邮 
引 理 1.3.1 知 它 可 表 为 4), 站 的 形状 , y(t 肋 当日 国定 时 为 
5 -可 测 . 现 在 证 明 , 实 慰 上 

gm), 8) = aoPetw) /dh (Ba .5.16Y 
也 成 立 。 上 式 左 边 为 4 的 纺 … 可 测 函 数 , 故 当 然 也 绕 。- 可 测 。 现 
任 取 4€ 风 gm, 在 (1.5.1 句 中 取 如一 此， 有 


P, 4) =| PCjiw)ePsG. 
又 由 (1.5.15), 有 了 (A141(0)) 一 P(Ait()) ~ BCT) li(D)), 
故 PC 一 人 可 FredPsGo)， 
出 于 此 积分 之 被 积 画 数 为 和- 可 测 , 由 g(t(e)，0) 的 定义 知 
Ps = | Bala C0) H+)1dP, le) 


=|, Ea lw]g (0), Oa Co). 
出 此 式 , 利用 条 件 期 望 的 性 质 g, 得 
Po 全 = | Baty Gm), OTake) |i(0)1dh Co) 
后 肌 茶 件 期 望 性 项 o, 得 
六 = gD, HTDUAG | gL, WA), 


这 对 一 切 4E 雪 wy 成立 , 因而 证 明了 (.5.16), 由 1.5.16) 立即 入 
出 0.5.19). 
反 过 来 ;, 设 (I .6.12) 成 立 ， 对 固定 的 AE: 滨 ,和 EB, 定义 
汉典 by 于 红 w 上: yO) 一 Poet4 站 MD 对 任何 OE 玫 s， 则 易 见 
dy (w/aP, (BN — PCANiCm). (1.5.17) 
河 此 上 式 者 近 为 塘 -可 测 , 且 对 任何 doE 顷 有 


|. PtDJEPD = PAN Ao) =»(Ao). 
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从 而 
dy (2) /dN (Bo0) = (dy (8) /dPe) (dPo lw) /dX) 
=PoAlt(2)) gD, OD, (1.5.18) 
另 一 方面 , 易 见 dv(w) /GDPe 一 T4989), 故 由 (1.5.16) 
CpG) /dA (Bx) — (dv C8) /dPo) (Ad Poel) /dN) 
— Tar) gilts), ), 
所 以 又 有 { 贝 条 件 期 望 的 定义 很 易 证 明 ) 
dv (wn) /aN Bn) = BLT XR) oR), Oi)] 
gt), DP CANis)), 
将 此 式 与 己 .5.18) 比较 , 得 
dhDDGCD， 及 
— Pld tte) gm, HD (aa, .6.19) 
由 六 的 性 质 知 ,好 ,5.19) 也 人 ae,， Po 成 立 ， 册 让 ..16) 短 
Po(i:gG(， 信 ~0)=0 
艳 由 人 .5.19) 关 
AIO) = Bordlitr)) (a, e. Pe). 
由 此 训 知 ,不 论 09E 昌 如 何 , PC 总 再 作为 一 个 Pekdto))， 
因此. 在 维 了 tw) 时 下 的 条 件 概率 确 与 绢 无 关 ， 从 而 得 出 统计 量 
tv21 的 充分 性 . 
典 在 县 禹 证 蜗 ， 分 解 定 理 中 给 的 条 忻 与 民 .B.12) 等 价 ， 车 
f1. 了 .12) 成 立 , 虽 有 也.5.1 从 注意 入 安 w， 此 因由 入 的 性 质 
MtA) 一 日 之 P(A) 一 0 对 一 切 上 用 :六 一 忆 {4 {2), 
记 下 一 人 Ge 相册 


fw 国 一 人 PT 
ym) HRAm) ta. e. i, 
反 过 来 , 若 此 式 成 立 , 出 


Uh /d= 2 dPo tw) /Ape 


CR DA A 


， ,sy po D/OD, BED, 
0 
则 有 有 

Plt) -| Go, Dhan lo) = gl), Oak， 


洒 尾 何 4€ 绍 4s， 这 证 明了 QPote) /oh 一 产 (5m), 的 (Bo), 其 中 
9 闪 为 1 的 中 - 可 测 画 数 ， 因 而 民 .5.12) 成 立 { 必 其 中 的 yg 为 
9 ,这 完成 了 分 解 定 理 的 证 明 ， 

引 理 工 .5.2 的 证 明 《这 个 证 法 叫 “ 穷 举 法 ” 是 测度 论 中 常用 

的 证 法 之 一 ). 

个 失 普 遍 性 可 设 吕 为 有 限 测度 ， 事实 上 ，j 既 为 o- 有 限 的 ， 

可 将 2s 分 解 为 两 黄 不 相交 的 {4j 之 并 ，AnE By, n=1，2, + 

且 0<pgtdn) < 一 co 定义 


A) Dy oN A AED,. 


则 je 为 哆 土 的 有 限 测度 ， {Ee HEB} «pe 
以 1 i- 一 切 形 如 名 一 ad in 的 概 率 测 虚 的 集合 四 此 处 太志 日， 


全 是， £1, 2, Dl 显然 ， 有 Fn. 记 


Yd 对 任何 人 QE.F. 
我 们 来 主 昭 ; 存在 信人 台 . 实 , 狼 
0 地) 一 0 对 一 茹 扫 E 交 , 
显然 , 让 明了 这 一 点 也 就 证 明了 了 引 再 1.8.2. i! 
CCEA 存在 QE. 数 Q 必 > 
qm>0 fa. ep 于 OL} (1 .5.20) 
SUB) (人 .65.211 


‘注意 - 愉 非 空 : 任 取 8EG， 记 外 -Po CC 人 fa:dPotey yes 0 
投 一 串 Tc 化 至 im p On 一 刀 并 人 司 写 Co 丰 应 的 如 (由 


《人 145.20)， 满 足 Vol 一 omyau>>0 于 CC 上 (只 露 先 取 一 起 
fj 使 过 .5.20)? 成 立 上 且 人 Ko >0， 再 区 Co 中 委 掉 (zw) =0 的 那 


nT 


些 s). 记 Co= Uo 则 记 名 o 一 -之 92 有 QoE. 多 ， 且 
qo) = dt (0 /i = 之 go/3>0 于 Co 上 ， 
且 显 然 Qetew>D0 故 DogE- 友 ， 现 设 @otd = 水 4E 角 ss 性 到 
QEF, 记 C= {rz:9(D)>0， 则 (N00=0, 政 WANOwW =0 
(回忆 gol 丰 之 0 于 Oo 上 )， 放 有 人 @(4N00) 一 0 ( 因 @p}， 因 为 
d( 人 在 生 -~-QO 上 为 0， 故 有 咏 [4 站 (人 -On 人 伙 一 史 ]=0， 最 
后 ,有 
QA O00 NO -0. {41.65.22) 
因为 , 阁 紫 式 不 成 立 , 则 由 氏 科 所 知 
ned -00 NO >0. 
故 车 取 DD=CoU [AN (名 一 0O0) 站, 则 (了 D>>pCO0) (回忆 点 已 
假定 为 有 限 测度 ), 但 卫 E.#， 因 为 由 
CAN (和 一 Co NO>0, gn) >0FTO0OL 


知 4n(2 -conOE-L 取 人 -去 9o+ 豆 中 则 
GEF, gw =- 二 [go(o+g 人 oO]>0 


于 了 上 , 且 (D> (O00) >0. 
帮 由 .的 定义 知 了 EA 因此 (D) >>p(09) -supp(O) 是 不 可 


能 的 ， 故 有 (1.5.22)， 所 以 
QA =QANOD -HALAN (人 一 On (位 一 号 
t+Q(AN (县 一 Co N00)=0. 
对 性 取 的 @E 多 都 成 立 , 这 完成 了 引 理 的 证 明 。 


{五 ) 极 小 充分 统计 量 


如 时 将 统计 量 看 成 样本 的 加 工 品 ， 那 么 除了 要 求 它 保 存 % 中 
所 售 全 部 信息 外 , 自然 地 还 可 提出 另外 一 个 要 求 : 加 工 得 您 “ 精 ” 愈 
好 : 100 个 数据 加 工 成 10 个 数 , 不 如 将 其 加 工 成 一 个 数 , 要 是 后 者 


本 下 性 昌 


保留 了 灰 来 100 个 数据 中 的 全 部 信息 . 从 这 个 想法 出 发 就 引出 
所 请 " 报 小 充分 统计 晤 ”的 概念 在 本 厂 中 , 我 们 不 加 证 明 地 介绍 有 
英 这 个 概念 的 基本 事实 ， 

先 举 一 个 例子 以 便 更 具体 地 看 到 ， 充 分 统计 基 确 有 “ 精 ”“ 粗 ” 
之 分 。 前 而 我 们 证 明 过 ( 便 .5.2， 重 44.5. 中 ， 若 以 二 记 m 次 独 
立 试验 中 匡 事 件 4 的 发 生 总 次 数 ， 风 为 4 的 概率 乡 的 区 分 统 
计 鞭 ， 现 让 我 们 将 全 部品 个 试验 分 为 两 段 , 分 别 包 括 前 加 个 和 后 
RR 一 9 个 C 守 宫室 一 试验 ;并 凡 厂 , 和 分 齐 记 在 这 两 段 中 事件 4 
及 现 的 总 次 数 ， 则 由 分 解 定理 容易 证 明 ， 太 = (i) 为 充分 统计 
这， 伍 显 然 我 们 宁 恶 用 上 而 不 用 弘 除 非 为 着 某 种 不 是 单纯 梢 计 
如 的 日 的 )， 因 为 尽 符 基 充 分 ， 但 它 独 工 过 粗 ， 还 设 有 牧 底 把 无 交 
要 各 的 东西 都 斑 掩 . 

现在 我 们 给 出 正式 的 定义 . 

定义 4.5.8.( 极 小 充分 统计 量 )， 设 #o) 为 ( 妥 ， 航 上 的 一 
个 充分 统计 其 , 取 恒 于 kz， 圾 m)， 入 上 的 和 分布 族 为 {TPo， HE 人 
著 允 任何 定义 于 全 ， 取 值 了 于 某 可 测 空 间 (5,， 2) 的 充分 竹 计 莉 
sz)， 必 和 三 在 出 (8S, 名) 到 《FF， 轨 2) 的 可 测 变 换 t= yl3)， 坟 及 
Esa， 满足 条 件 Pe C4) =0 对 企 林 8ES, 致 


tw) =9 tstr))， 对 任何 zsE4. (1 .6 .23) 
则 称 上 为 一 极 小 充分 统计 量 . 
员 巾 这 定义 卖 南 上 看 来 烦 复杂 , 实质 上 是 一 简单 的 概念 : 先 把 


料 本 期 工 放 Se) 然后 , 通过 导 -5.28) 的 方式 , 将 “半成品 ”so 其 
工 尖 成本” 认 从 。 在 这 两 步 吉 革 中 信息 都 没有 氢 失 . 

极 小 充分 统计 盘 的 概念 相 五 十 年 代 前 捐 和 由 Lehmanrn, Sobh- 
atto, Nauder 等 人 发 展 起 米 的 ,在 Buhadur 1954 年 的 .| 上 作 Ann. 
Natbh. Statisi., 954, p. 423) 中 有 对 充分 统计 量 和 极 小 充分 统计 
其 的 系统 的 论述 ， 可 供 参 考 。 这 个 理论 中 的 一 个 基本 事实 如 下 所 

定理 1.5.4.( 极 小 充分 统计 量 的 存在 定理 ).。 和 假定 分 解 定 班 
中 的 条 件 戌 立 , 且 样 本 空间 为 欧 氏 的 , 则 极 小 充分 统计 量 必 存在 ， 


了 后 > 


证 明 可 参看 上 面 遍 引 的 Bahadur 的 工作 .我 们 指出 ; 具体 地 
说 , 例 1.5.1 中 的 统计 量 就 是 极 小 充分 统计 量 ， 但 这 个 统计 量 的 
形式 不 使 于 应 用 , 所 以 ,一 般 都 是 取 这 么 一 个 统计 其 六 x), 满足 条 
件 ( 记 导 见 便 1.5.1); 

i =) ot) = 对 一 切 8E9 ‘1.5.24) 
且 #%w) 往往 直接 表 为 2 的 消 数 .不 难看 出 ， 由 定理 4.5.4 推 知 ， 
满足 二 .34 的 #2) 必 是 极 小 充分 统计 量 ， 举 两 个 例子 . 

例 1.5.9. 考虑 例 1.5.2, 用 那里 前 记号 ,在 从 上 引进 计数 测 
度 记 则 了 (tz, 人 外 就 是 (I.5.1)， 其 中 避 古 而， zn 中 的 个 数 ， 
这 时 , 任 取 两 个 样本 点 多 多 以 725 和 ?5 记 s 和 中 1 的 个 数 , 则 
易 见 


ft0) 一 庙 ( 六 对 一 切 BE S ms= 7, 
由 此 看 出 , 7172) 一 ms 读 是 一 个 极 小 充分 统计 量 . 
例 1.5.10. 诈 四 二 (Xi 下 下 四。 为 证 .万 1 
~ 入 ta, 0 参数 为 8 (g, co 人 对 及 。 上 的 工 测 度 ww, 六 的 密 
度 为 ( 例 1.5.6) 
Fe， 的- (Qa -exp| — 1 Dm RD — 了 GE—a)? |. 
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记 t(w) 一 (人 一 区 2 二)， 则 易 见 
t:21 


. fat0) 一 fy(9) 对 一 切 96€ Ott) tg). 
因此 ,1(z) 是 一 个 极 小 充分 统计 量 . 


$1.6. 完全 统计 量 


(一 /定义 和 例子 
这 个 概念 与 正 交 函数 理论 中 的 完全 人 性 概念 相似 ， 但 其 统计 背 
景 则 不 锭 区 分 统计 量 那 样 好 说 明 ， 因 此， 我 们 目前 不 作 过 多 的 解 
释 . 今后 读者 会 通过 有 关 问 题 看 出 这 个 概念 的 意义 . 
定义 1.6.1 (完全 分 布 族 与 完全 统计 是 )。 设 {Po, 8€} 为 
* TG 


样本 空间 ( 孚 ，: 堆 e) 上 的 一 族 概 率 分 布 。 若 允 任何 定义 于 胖 上 的 
绕 x- 可 测 函 数 fm) ,满足 条 性 
AA)) 一 0 对 一 切 8ES， 
即 | ADaPoa =-0 对 一 切 0EG@， 
必 有 ACE) -0 (a.e. Po 对 任何 bce， 
则 称 分 布 族 1 4EgB 基 完全 的 ， 
近代 全 为 (各 ， 胃 o 上 上 的 一 个 概 膏 分布 族 (不 必 为 完 金 
的 》， tt 为 定 呼 于 坚 琅 值 十， 侈 2 的 统计 量 ,， {了 Ps, EG 是 
Lo, EO} 的 导 当 分布 族 . 若 {P88E€ 加 } 为 完全 分 布 族 ， 则 称 
i(2) 为 一 完全 统计 革 . 
因此 ， 要 验证 统计 量 二 的 完全 性 ， 需 要求 由 二 的 分 布 族 {了 P3， 
吕 全 对, 然后 证 明 : 车 
| ,gdp -0 对 一 切 5E0, (1.6.1) 
网 必 有 Pt:8 的 关 D0) = 对 一 切 8 也 可 以 由 
[sapP, le) ~0 
《对 一 茹 BE 出 发 ,在 学 空间 中 讨 沦 ， 
例 工 .6.1. 考虑 例 1.5.2， 取 统计 量 {2@) = 中 的 工 的 个 刺 ， 
则 上 的 分 布 为 二 项 分 布 Bw 四 ,011 


人 一 下 -人 jea-om 二 0, 1 
这 时 , 条 件 忆 .6.1 成 六 


因而 若 记 y=B/ 坟 一 从， 则 当 0<B<1 时 有 0<y<<00, 而 


Sy) ( 1 | 0, Oy<oo. 


而 这 必须 5 人 -0 =0, 二 *" ,To, 


即 gy) =0, EF=0, 1, 1, %. 
这 证 明了 统计 车 上 的 完全 人性， 

例 1.6.2， 设 征 二 (7 加) 导 1，… 着。 为 生 d.， 训 ~ 
忌 人 bp) 此 处 8 一 (9,， 060s), 参数 空间 为 和 = {9 = (0) :一 co 
去 由 二 0<cof， 考 虑 统计 量 

tle) 一 (hm), tw)) 
= (min{fgr, +, tr}, mart 27, ts}), (1.6.2) 
# 的 妊 本 空间 为 全 = (和 纪 :一 00 世 太太 如 之 00}, 分 布 族 为 QI 区 ) 
一 产 Q， 外 qtdts， 其 中 
一 J (和 一 相当 机 所 有 < 扫 丰 雪 四 


0， 其 它 志 
我 们 来 证 明 ; 上 是 完全 统计 量 ， 这 相当 于 证 明 , 若 定义 于 了 (页 ， 志 ); 
一 5 二 所 从 和 所 oo 的 8(， 雪 ) 满 是 

yt, fa) (9 —f) "20 dt = 0, {1 .6.3) 


i 苹 由 二 看 


对 一 切 5< 记 则 90 约 一 Da es. 了 测度 ). 
和 玉 记 9 可 痢 正 , 负 部 分 , 即 
1 【而 ， fa) =max{g {fy #9), D0}, 
act ta) = 一 卫衣 和 全， 要 于， 


1 
产 G, 的 -| 《pa 一 车 


1 93 沸 非 贷 且 yg= 于 一 9，{ 寻 .6. 引 可 写 为 


| (Dh ds 


Cr 


= | ga lt, to) (ta — "df dts, .6. 析 


对 任何 4<5， 如 图 1-1, m 为 直角 坐标 系 04s 中 的 直线 抽 ~ 本 . 
我 们 证 明 ; 对 此 直线 上 方 的 任何 其 边 与 坐标 轴 平 行 的 抢 形 4B3CD， 
有 


中 | gd, ta) (Gh) didta 


于 CD 

= Ch, ta) (可 一 到] at aio, (1.6.5) 
BD 
事实 上 , 由 图 中 直接 得 出 
[| qh do) (fa — ta) "ah dt 
Abin 
一 中 gtd t2) (ta—h) ?dt di 

ABAR 

一 | Ti) 《加 一 下) 全 下 加 
EC 

一 人 Oh, ty) (ta — th) 2 ah ds 
A 


. 
+ | 下 


而 由 刀 .6. 力 知 , 对 4~=1, 2, (1.6.6) 右边 相应 项 是 相等 的 ( 即 


| | gh, te) (ta — 1) "dt ata 


AEAL 


一 fi! V2 #1, ta) (ts 和 三 ] 2 [i ta, 


等 等 ), 因此 由 (1.6.6) 立 册 得 出 (1.6. 辣 ， 因 此 , 车 在 集 


# TD 


= 人 和 韦 : 一 人 < 式 羡 拟订 <<co} 的 一 切 Borel 子 集 构成 的 c- 域 只 
上 定义 两 个 测度 


ji CAY -| gh, bo) Ge bh) ?dh dl, i=1, 2, AE. 
过 


则 由 民 .6.6)，m， 和 在 台 前 任 一 其 边 与 堂 标 轴 平 行 的 证 形 上 一 
致 ， 由 于 Hx， ja 是 G- 有 限 的 ， 由 此 推出 ma 于 E24 上 ， 邯 


| #9) (和 一 丰 ) "Gh 一 0， 对 任何 4E 少 . 


由 此 推出 yg, 纪 ) (如 一 二 )*? 一 0 (8 三 测 度 ) 于 号 上 ， 即 
9 一 0 8. 9. 荆 测度 ) 于 心 上 . 证 毕 
例 1.6.3， 很 容易 举 出 非 完全 统计 重 的 例 了 于， 例如， 设 王 一 
《站 4 iid.， 1 的 分 布 属于 某 旗 .多 ， 而 
多 中 任 一 分 布 有 有 限 均 值 ， 术 (2) =% 为 一 统计 量 ， 但 非 完 全 的 , 
国 若 令 上 
8 二 一 8) 一 和 一 好、 
则 如 fg)) =0 对 .多 中 任何 分 布 , 但 9=0 的 狂 率 并 不 为 一 
个 更 贴切 的 柚子 如 下 ， 考 虚 例 1.65.2， 取 mm, 1 所 mm 太一 4， 定义 
统计 证 其 的 一 C0， 吉 (20))， 在 (人 ,本 (0 务 别 为 前 和 m 次 和 后 
7 一 4 次 试验 中 事件 出 现 的 次 数 。 我 们 知道 去 是 充分 的 ， 但 非 


完全 ， 央 车 令 9 鸭 一 计 一 2 则 如 GCCED)))=0 对 一 切 
日 0<6<sl， 但 409 =0 的 概率 不 为 1， 在 例 1.6.1 中 看 到 ， 统 计 
量 主 十 旭 为 定 全 的 ， 

这 个 例 节 给 我 们 这 样 一 个 启发 ， 统 计量 的 泵 完 全 性 可 能 与 其 
非 极 小 性 月 关 . 事实 上 , 可 以 证 明 : 完全 充分 统计 生 为 极 小 充分 统 
计量 ,但 共 北 不 真 ， 

二) 指数 族 齐 完全 性 

定理 1.6.1. 设立 的 样本 空间 为 (他 级 四 ,分布 族 为 指数 殴 

dPolw) =O Gexp[ 袜 OT (8) ] da), EO, 
SO 。 


此 处 全 为 及 之 一 于 集 ， 著 日 (作为 及 :的 子 集 ) 有 内 点 , 则 统计 量 
49) 一 《T1202)，*…*， Tx)) 是 完全 统计 量 ， 

证 ， 不 失 普 遍 性 不 妨 设 8=0 为 介 之 一 内 点 ， 根 据 引 再 
1.8.3, 公式 (1.8.28), 1 的 分 布 族 为 


aPY (#) = O (0)exp ba ga 人 ,ge 
现 设 了 0) 满足 条 件 | /GaP7 的 =0 (一 Bo ， 即 


| f Worp[ BO] 8) —0, 8 EU (1.6.7) 
由 于 (0, 。…, 0) 为 日 之 内 点 ,存在 4>0, 至 
{0 0, BO) j= Ct, (1.6.8) 
故 仁 -6. 信 对 | 色 [ <a, j 一 1，*…, 上 威 立 ， 将 有 ( 提 案 为 其 正 、 负 部 
分 之 差 , f=f+ 一 了 ,得 
[rr Worp[Eom la ® -| fF Corp[Bos) dO), 
{1.6.9 
[8 a, f=1, *, Ek. 
根据 定理 1.2.4 (4.6.9) 的 左右 两 边 都 是 多 一色 二 iy, 了 一 1 …， 
下 的 在 
0= {i Btn és a, 1) 0, 了 一 了 有 
内 的 解析 函数 ， 因 定 久 一 右 十 ny 了 一 2 (但 | 站 [<m j= 
2,…, 隐 , 则 丝 .6.9) 两 边 是 名 一 外 十 rs 在 条 形 区 域 
Qi= {+ :tia [| 00} 
内 的 解析 函数 ， 且 在 此 区 域内 的 一 个 线段 | 各 | <， 一 0 上 二 者 
一 致 ， 由 单 变量 解析 函数 的 唯一 性 定理 可 知 , 对 固定 的 go，…, 办 
(其 实 部 都 在 《一 4, 9) 内 )，(1.6.9) 两 边 在 Qi 上 一 致 ， 由 此 逐 
步 推 下 去 ， 最 后 达到 ， (1.6.9) 左右 两 边 在 口上 一 致 ， 特 别 ， 令 
所 =… 一 总 =0, 知 
j Worpli Bm] a =| Wopli hj ©, 
(1.6.10) 


S81*: 


一 


对 任何 实数 并，…， 7%， 特别 , 取 人 一 人 一 全 = 总 有 

1 产 Bem 因 = Wap -5. 
车 86-0, 则 +(D 一 0 (ep 六 的 =0 (@. 8. 4), 从 而 /0) = 
0 《a. e. Jj")， 故 可 设 5>0， 定 义 概率 测度 w* 

vB)= | 产 的 au 的/ 


(本 一 | 产 (ape 的 /3 Be,. 
则 由 (4.6.10) 得 
{, oxp[s Ema] dp+ (A -| oxp[1 ng 0 下， 
对 任何 实数 mm,，…， 六 ， 这 无 异乎 说 , 两 个 硫 率 分 布 w* 和 vw- 的 特 
征 画 数 一 样 , 故 击 特征 菌 数 叭 一 决定 概率 分 布 之 定理 , 得 v' 一 上 
因而 
[raw = 对 任何 BE Bs. 


由 此 推荐 六 人 = 六 (的 (8B 训 )， 即 J(D=0 但 em 这 
完成 了 定理 的 证 明 . 

由 前 几 节 直到 此 处 为 目的 讨论 ， 我 们 总 结 出 指数 族 的 三 个 优 
成， 一 是 它 包 含 了 很 多 常见 的 分 布 ; 其 次 是 它 有 和 良好 的 分 析 性 质 
三 是 它 有 (在 本 定理 条 件 下 ) 完全 充分 统计 辣 . 这 后 两 条 性 质 决 定 
了 许多 问题 在 这 个 族 中 有 满意 的 解决 。 因此 , 指数 族 的 重要 性 就 
可 想 而 知 了 . 

用 本 定理 可 验证 许多 党 见 统计 量 的 完全 性， 例如 ， 碾 3， 
| 


(XY, 容 ( 开 一 到 信 为 完全 统计 量 (其 充分 性 前 已 指出 ), 我 们 不 一 
一 列举 其 它 的 情况 了 . 


《三 次 序 统计 量 的 完全 性 
设 至 9 至。 为 从 一 个 其 分 布 为 五 的 一 维 总 体 中 抽出 的 


Boa. 


iid. 样 林 ， 丈 属于 一 和 分布 族 .多 ， 将 瑟 :，…， 咎 。 按 大 小 排列 得 
让 由 筷 太太) (A 人 my) 就 是 绊 本 到 4 ny , 的 次 序 
统计 量 . . 

我 们 的 问题 是 研究 次 序 统计 量 的 完全 和 性， 十 分 明显 ， 次 序 统 
计量 是 否 有 完全 姓 ， 取 决 于 分 布 族 多 拿 一 个 极端 的 例子 来 说 ， 
证 .多 兵 包含 一 个 分 布 吾 (0, 1)， 则 次 序 统计 量 的 完全 性 等 于 要 
求 , 对 任何 Borel 可 洞 的 对 称 函 数 (wo …， co) 定义 于 1 二 国生 十 
一],…, 人 坊 ， 具 蓝 

Pf fm ee 
必 有 

fw, ta 0 (8 6. 7 于 OARmel, z=1, **:%, 

而 这 显然 是 不 对 的 ， 因此 , 当 多 只 包含 一 个 分 布 旦 0, 1) 时 , 次 
序 统 计量 并 不 具备 完全 性 . 

因此 问题 归 鱼 为 : 分 布 族 多 要 有 怎样 的 性 质 , 才能 鸽 次 序 统 
计量 有 完全 性 ? 下 面 我 们 将 指出 一 有 力 揭 判别 法 ， 其 广泛 性 足以 
应 村 常见 的 统计 间 题 ， 为 了 这 个 目的 ， 先 引进 若干 有 关 的 记号 . 
设 思 , 到, 为 7 个 一 维 概 率 测度 ， pe>0, 一 1 ,了 而 人 二 
二 pr 一 1 则 也 ~ 高 pF 理解 为 一 概率 测度 , 定义 为 


(5) 一 宫 PP1(S) 对 任何 SE 元 


又 车 卫 为 一 概率 测度 ，5SE 纺 而 了 (5) 0, 则 记号 Fs 表示 一 个 
概率 测度 , 定义 为 
FelA)=F(SNA)Y/F (IS), AEW. 

定理 1.8.&. 设 分 布 族 多 满足 以 下 两 个 条 件 : 

(a 车 了 EF， Fs€EF, 则 对 任何 二 0, po 记 0, 和 十 Pp 一 1 
有 mFirpmFst. 

(BD) 荐 PE SB- [a, 了 ),， 一 co0<4<5<oo 面 了 (5S) 天 0, 则 
PsEY., 

s BPs 


斋 次 序 统 计量 (ca …， 互 mm) 大 完 全 的 (对 任何 自然 数 纪 ， 

我 们 将 定理 和 证明 的 主要 部 分 写 为 下 面 的 下 理 : 

引 理 1.6.1. 设 分 布 族 . 多 满足 上 面 的 条 件 (a)， Cpr，…, 34) 
为 Borel 可 测 芍 对 称 沙 数 , 满足 条 件 


ew) 0， 对 任 们 了 PE. 
(1.6.11) 
则 对 多 中 的 任意 ww 个 分 布 了 …，F, 必 有 有 


fy 7, OEP) dP en) ~ 0 (i.6.12) 


为 了 证 明 ， 首 先 注 意 由 条 人 忻 (9) 及 FE 多 ，i=1,， :名 知 ， 
对 尾 何 自然 数 生 ，…， 织 和 如 二 记 蕊 WW 有 (Pa 二-… 二 他/ 
kE 多 .对 每 一 组 这 样 的 缮 ,，，…， 训 ， 定 义 一 全 由 形 如 (83, … 和 
的 元 素 克 成 的 集合 a (人 …, 纳 如 下 ; C1 fj) EOC， 记 )， 
当 且 促 当 每 个 关 为 向 …， 纹 中 的 一 员 ，w 一 1，.…，%， 每 个 记 为 
中 的 一 员 , 一 二 … 大、 记 


TG = De 
而 有 
ade se 一 0. (1.6.13) 
证 明了 这 个 事实 也 就 证 明了 (1.6.12)， 因为 ， 有 下 让 = t= 1, Uy 
和 一 %， 则 身子 的 对 称 性 , 号.6.1 多 即 为 民 .6.12) .为 证 以 .6.18)， 
用 归纳 法 。 由 假定 .6.1i1) 知 (1.6.13)， 当 名 =1 有 时 成 立 ， 设 
(I.6,18}) 当 Er? 一 1 时 成 立 ， 任 取 名 条， 和 过 全 呈 
记 玉 = (十 十 了 /7， 如 上 记述 FE 多， 于 蚌 根据 假定 
.6.11), 有 


『 rc ‘0, dF (Cm) dF (ony =0, 


-eo 


以 也 = (本 十 下 十 了 VY 代入 此 式 面 展开 之 , 小 难看 出 结果 为 (去 
掉 无 关 的 常数 因子 站 


+ 加 和 下 


工 ( 力 ， 四 jy) 


Cf rs fn) E ER "or se) 


Tr—1 


十 Z 之 忆 区 


Fl ety ela Ci tn ten 


= 之 ] Tj J) =0, 
Ca dm) Eredar dr) 


由 归纳 假设 , 和 4 中 的 每 一 项 岩 为 0, 故 得 
yh 机 3 =—0. 
Ce fm Es 


这 完成 了 《1.6. 1 人 的 归纳 证 明 ， 因而 证 明了 引 再 

现在 转 到 定理 的 证 明 ， 为 概念 清楚 起 见 ， 我 们 形式 地 将 次 序 
统计 量 ( 尼 (0，…， 下 co) 写 为 样本 基 1，…，Xn 的 函数 TT 了 CEI, …， 
及,) ， 设 有 Borel 可 测 函 数 册 到 

Eylg (Xo, %, Fm) — Br[LgtT CR, ,RY ~ 

(1.6.14) 

对 任何 次 GE 多， 此 处 召 r 宕 示 均 值 是 在 于 :前 分 布 为 了 的 情况 下 
取 的 ， 显然 ，9(Z (CR …， 卫 小) 为 一 Borel 可 测 的 对 称 函 数 ， 记 
为 下 六 下 ,于 是 Cl 和 .1 二 可 要 为 


| 人 了 (zi tn) GF (1) dF (rn) —0, 


对 任何 EF, 依 引 理 1.6.1, 对 属于 红 的 任意 分 布 P1,…, Fw 
有 (1.6.19), 根据 分 布 族 . 洲 满足 的 条 什 (b), 设 一 0<a1<bi<o0， 
F(a, 00) >0, t= 1 "Wo, Flewm= Pi, t=1i, + N, ja 
而 

人 re 0 sda Pe) P(e) =0. .6.15) 


了 
些 镍 了 一 To Va) :EO 十， wy n}. 如 果 至 少 有 一 
个 % 致 了 ([as 办 ) =0， 则 侍 .6.15) 当然 成 立 。 所 以 ，Q .6.15) 
对 一 切 上 述 形状 的 了 成 立 。 由 测度 论 中 的 例 行 推理 立 得 ， 对 任何 
EB 有 
| Fe odaF (ey) dF (en) ~0, 
点 


se B65 s 


办 此, 若 记 
下 一直 2 7 0) fm on) A 0}, 

则 有 (FxXFX...XF)N)=0, 
对 任何 下 E. 多 ， 因 而 完全 性 成 立 ， 定 理 证 些 . 

例 1.6.4. 适合 本 定理 中 的 条 件 (a) ，(b) 的 分 布 族 .多 有 

所 有 一 维 分 布 的 族 ， 以 及 所 有 其 负荷 集 为 一 固定 的 Borel 集 
5 的 子 集 的 分 布 的 族 ; 

所 有 一 维 连续 分 布 的 族 , 以 及 所 有 其 负荷 集 为 一 固定 的 Eorel 
集 癌 的 子 集 的 连续 分 布 的 族 ; 

所 有 绝对 连续 (对 工 测 度 ) 分 布 的 族 ， 以 及 所 有 其 负荷 集 为 一 
固定 的 Borel 集 8 的 子 集 的 绝对 连续 分 布 的 族 ; 

所 有 一 维 离散 分 布 的 族 , 以 及 所 有 其 负荷 集 为 一 固定 的 Borel 
集 避 的 予 集 的 离散 分 布 的 族 ; 1 

廊 月 其 均值 存在 有 限 的 一 维 分 布 族 , 或 , 指定 *>>0, 所 有 其 r 
和 阶 绝对 撼 有 限 的 一 维 分 布 族 ， 以 及 具有 这 种 性 质 且 其 负荷 集 为 一 
辕 定 的 Borel 集 5 的 于 集 的 分 布 的 族 , 如 此 等 等 . 

上 由 此 可 见 , 这 个 定理 包含 了 所 有 常见 的 重要 情况 . 

这 个 定理 可 以 推广 到 多 组 样本 的 情况 ， 

定理 1.6.8. 设 守 。,，'…， 下 为 摘自 分 布 为 入 ,的 总 体 的 iid. 
样本 ，1 一 1 又 下 0 一 cn 全体 独 
立 ， 假定 瑟 属于 分 布 族 .多 7 一 2 以 误 i 生 下 gp 
记 站 如 四 加 的 次 序 统 计量 , i 一 1， 而 定妆 

TR, se, Ts,, ee, >. EE no) 
= (10), "yy 上 400, "ry sw “ry 及 eono)。 

如 果 每 个 多， 1 一 上 pe 都 满足 上 定理 中 的 条 件 (&)，(b), 刚 严 
是 完全 统计 量 . 

除了 某 些 细节 上 的 复杂 性 外 ， 本 定理 的 证 明 方 法 与 上 定理 无 
本 质 人 差异 , 因此 将 其 留 给 谈 者 作为 一 个 练习 . 

义 , 如 果 将 定理 1.6.2 中 的 条 件 (a)，() 去 掉 一 个 , 刚 定理 的 
结论 不 再 成 立 . 我 们 邦 举 出 相应 的 反例 的 任务 也 交 给 读者 . 


4 BG =- 


《四 ) 有 界 完 全 性 


在 有 些 问 题 中 , 我 们 只 需要 下 述 较 完 全 竹 略 弱 一 些 的 性 质 . 

定 久 工 .6.24 有 界 完全 性 ). 设 变 量 卫 的 样本 空间 为 ( 公 ， 
级 m , 分 布 族 为 {Po,，8€@}，#(w) 为 定义 子 党 取 值 于 (2W8) 的 
统计 量 , 其 分 布 族 为 {P39,， 8EBl， 若 对 任何 满足 条 件 


rePO-0 对 一 切 9E@ 


的 有 界 绍 s 可 测 函 数 了 (0)， 必 有 Pil{w: 了 (0) 卫 0j) =0 对 一 切 
98EB, 则 称 分 布 族 {Ps, 8E5@} 为 有 界 完 全 的 . 若 {PY, 9EB 为 有 
界 完 全 的 , 则 称 主 为 有 界 完全 统计 旦 . 

显然， 完全 的 分 布 族 或 统计 量 必 为 有 界 完全 的 。 下 面 的 例 于 
说 明 , 此 事实 之 逆 不 成 立 . 

例 1.6.5. 设 兴 一 1 革 3， … 小 分布 族 为 
P(X=0=7, Pl- = 
n= 1, 2, 7 O01, 

设 CFCXY) 一 0 对 一 切 名 0 之 8<1， 则 


FO .6+ dD: FOD 01 0, 0<8<1, 


即 
0 fF(0) 二- 一 衬 nf (0) 6", 0 <1. 


此 式 两 边 为 9 的 竺 级 数 , 在 191 <1 内 收敛 ， 故 其 对 应 项 系数 必 相 
同 , 即 
FD =0, f= ~ (DFO, n=2, 3 

车 要 求 了 有 界 ,; 则 由 此 知 必须 有 了 (0) =0, 因而 

f(D =f (0 =f(3) -~ 0, 
这 证 明了 {Ps, 0E (0, )} 为 有 界 完全 的 。 但 它 不 为 完全 。 因 若 
取 joD -mn -DT 当 a-2 8 … (0) -AD-0 则 易 兄 
瑟 CF(R))=0 对 一 切 b6 (0, 1), 但 Po(F(X) 一 0) 并 不 为 I 

关于 有 界 完全 性 有 下 面 有 趣 的 定理 ， 


* S79 


定理 1.6.4. 设 互 的 样本 空间 利 分 布 旗 为 (人 必 ， 绍 sw) 及 {Pw 
6E 人 ,而 #(w) 为 一 有 界 完全 统计 其 , 取 值 于 (多, 族 让 内, 有 + 为 
充分 统计 量 。 则 对 长 何 定义 于 吧 的 有 限 各 -可 测 函 数 29， 当 
了 (于 ) 的 分 布 与 8 无关 时 ,对 一 切 8EB,，f( 玉 ) 与 太 半 ) 独 立 . 

证 ， 了 ( 瑟 ) 的 分 布 与 8 无 关 的 意思 是 对 任何 BE 多， 
了 etf-'(B)) 与 无关? 联 定 这 样 一 个 BB, 并 记 Pat 站 (BB) 一 a 
0&a1 与 无关， 由 统计 量 t 的 充分 性 ， 

P= PA{f1B) | 身 

与 日 无 关 . 注意 0 和 全 丢 贡 因而 gg 蚌 有 办 的 . 记 由 (和 一 gp0 仆 一 
Wy Bey (tT) = Be PHCE)) a= Eo {Pelf CB) [用 一 下 一 
Pelf TB 一 a 一 0， 对 一 协 8EB,， 天 由 1 的 有 界 完全 性 ， 知 
=0 (ae PD 对 任何 9E9,， 即 p 人 的 = te 了 PP) 对 在 
柯 23E 马 ， 现 在 注意 


PF (BP) Nt:O)) 一 | PCB) [DaPr 
= adPF GO ~aPY (0) ~aP, (s+(0)) 


= Pf (B)) Pi"(0), 任何 EB, BE OE HB,. 
这 证 明了 .对 任何 名 (这 ) 与 ( 耶 ) 独 立 ， 

值得 注意 的 是 ， 本 定理 之 逆 不 实例 如 , 设 肥 一 如 ~ 多 一 总 ， 
团委 一 Bi, 而 耳 的 分 布 族 为 

Pt{0)) =1, ~— oo oo, (1.6.16) 

显然 ， i(%) 一 z 是 一 完全 充分 统计 量 (建议 读者 自己 把 并 格 证 明 写 
出 来 }、 令 C2) 一 zg， 则 因 了 (2) 入 下 ) 在 任何 PGE BR) 之 王者 
是 退化 分 布 ， 因 而 对 任何 26ERi FE) 与 CX) 独立 ， 伺 显 然 
F( 互 ) 之 分 布 并 非 与 下 无 关 ， 

本 例 说 明了 ; [四 中 162 页 定理 2 的 必要 性 部 分 是 异 误 的 ， 建 
议 读 者 仔细 阅读 [7] 中 163 页 处 的 证 明 ， 以 指出 证 明 中 错误 的 所 
在 . 


DD 名 为 了 (的 值 域 中 的 o- 城 . 
二 Bd 


出 于 指数 族 有 完全 ( 因 曾 有 有 界 完 全 ) 和 伦 分 的 统计 侍 ， 战 由 定 
理 1.6.4 得 型 
系 1.6.1. 设 互 的 分 布 族 为 指数 族 
CPP 一 Or oxp(> oa Jap, EO. 
而 全 作为 Bi 的 子 集 有 办 点 ; 则 对 任何 捕 ( 定 义 于 作 肌 取 值 于 某 可 
测 空 间 )， 当 CX) 之 分 布 与 站 无 关上 时， 对 任何 站 FS) 必 与 
(让) (全 访 独立 (在 这 个 具 惧 铺 襄 十 可 以 证 明 ， 上 述 事 
实 之 道 亦 真 ， 证 明 留 给 读 少 作 为 练习 ) 
例 1.6.6. 设 是 .区 为 id oD 一 co0<0 
< oo 0<os<co，ro 扩 ) 满足 条 件 
FT rn = 任何 6， .8.17) 
求证 友 与 了 (于 独立， 
先 将 a? 固定 于 965, 则 #(w) 一 为 族 {N@@, 0 了， 一 co<0<o0} 
之 下 的 充分 统计 量 , 它 也 是 完全 的 ， 注 意 由 民 .6.17) 知 
TORI or, 一 有 
南郊 :一 …， 太 ,一 引 为 iid.， 其 分 布 与 9 无关 (Xi 一 8~NO0， 
0 成 已 固定 本 ), 故 ( 了 1 …， 吾 由 之 分 布 与 参数 昨 无 关 。 由 系 
1.6.1, 知 了 (Et 五 ) 与 避 独立 . 
适合 民 .6.I 人 的 重要 例子 有 


(XZ) 一 二 -了 党 (X 一 是 )* (样本 方差 )， 
4CX) 一 masfb …， 必 中 一 min{fXa …， 屋 《样本 极 郑 ) 
CE) -二 思 | 工 : 一 并 | (样本 平均 差 ) 
等 等 ， 本 例 的 结果 用 初等 方法 也 很 易 证 明 。 


第 二 意 点 - 估 计 


参数 的 点 估计 问题 是 一 般 的 统计 判决 问题 的 一 个 特例 ， 从 这 
个 角度 看 ， 它 的 提 法 已 包括 在 并 .4 中 所 描述 的 统计 基 决 问题 的 
提 法 中 了 ， 为 了 清楚 起 见 , 在 此 我 们 把 问题 提 法 青 明确 地 氢 述 一 
于 ,并 指明 它 的 某 些 特点 . 

设 变量 六 的 样本 空间 为 ( 品 ， 胃 由， 其 分 布 族 为 {Pe 9E8}， 
四 为 参数 空间 ， 也 就 是 说 , 我 们 知道 必 存 在 一 个 负 E8, 致 瑟 的 
分 布 就 是 Pa, 但 不 知 名 的 具体 值 ， 现 在 在 怠 上 给 定 了 一 个 函数 
940), 取 值 于 下 肉 ， 亦 即 ， 红 护 一 人 的， (办), 每 个 (从 
都 是 定义 在 马上 取 值 于 肪 的 丙 数 ?.。 对 变量 了 进行 观察 得 样本 
全 .要 根据 它 对 9 地) 在 参数 真 值 处 之 和 值 gC6o) 作 一 估计 ， 佑 计 
的 结果 用 一 个 8 维 向 道 表 示 出 来 。 也 就 是 ， 拿 Bs 中 的 一 个 点 去 
估计 yt 这 是 点 估计 这 和 名称 的 由 来 . 为 了 简化 记号 ， 我 们 仍 
用 表 参 数 真 值 ， 但 读者 应 注意 在 每 一 有 关公 式 和 运算 式 中 ,9 
的 意义 究 竞 是 指 参 数 真 值 还 是 泛 指 9 中 的 任 一 点 ， 这 一 般 都 是 自 
明 的 而 无 须 加 以 特别 的 说 明 . 

为 了 确定 问题 ,还 必须 指定 一 定 的 判决 空间 和 损失 许 数 . 一 
个 统计 问题 的 性 质 和 分 类 ， 就 依 这 些 而 定 ， 虽然 难于 对 点 估计 问 
题 和 其 它 统计 判决 问题 划一 条 截然 的 界线 , 可 以 说 , 以 下 几 个 特点 
是 点 估计 问题 的 特征 ; 

1. 判决 空间 (多, 绝 p) 为 欧 氏 的 , 即 作为 有 或 其 一 Borel 子 
集 , 灰 即 为 8( 全 的 维 数 ， 且 一 般 有 马 二 8B. 叭 。 当然 是 多 的 一 切 
Borel 子 集 构 成 的 o- 域 . 

了 D 如 前 面 指 出 的 ， 在 运算 中 当 把 gt9) 作为 向 量 看 竺 时， 总 认为 是 列 向 量 。 其 转 


置 向 量 有 了 时 记 为 "7 纺 而 不 用 凡人 的 ,以 与 9 的 的 导数 gy 的 相 区 别 ，g' (的 理解 为 
(gi 0), py EA 


90. 


2. 损失 函数 上 9, 由 一般 是 通过 9 四 而 依赖 于 名 即 有 
下 (人 护 ， 因 的 形式 ,当然 这 也 不 是 一 个 硬性 的 要 求 . 抽 且 ， 损 失 
函数 一 般 有 连续 性 . 

在 点 估计 间 题 中 , 判决 函数 一 般 称 为 “ 倘 计 量 "。 在 非 随 机 化 
的 情况 下 , 这 是 一 个 由 (全 ， 绝 2) 到 《外 二 四 的 可 测 变换 续 (2 ， 每 
当 有 了 和 样本 互 ， 就 算出 gz)， 用 它 作 为 Y( 人 的 估计 值 .， 在 随机 
化 情况 下 , 它 是 一 个 定义 于 全 Xx 乡 s 的 函数 34 信 ,DD), 满足 1.4 
中 所 述 的 对 随机 化 判决 画 数 的 要 求 . 

以 上 对 点 估计 间 题 的 描述 ， 着 重点 在 于 把 它 看 成 是 一 般 统计 
汰 闫 问题 的 特 俩 ， 但 应 注意 ， 点 估计 理论 的 某 些 重要 方面 与 判 央 
函数 理论 并 无 直接 联系 ， 特 草 蚌 在 大 样本 理论 中 ，、 那 里 注意 的 是 
当 样 本 大 小 无 限 增加 时 估计 基 的 极限 性 质 ， 与 著名 的 “ 极 天 似 然 
估计 “有关 的 问题 多 属于 这 一 方面 本章 也 将 涉及 这 些 问 题 . 


$2.1. 无 偏 估 计 

(一 ) 定 义 和 说 明 

在 指定 了 一 定 的 损失 函数 后 ， 点 估计 的 问题 就 在 于 寻求 具有 
某 种 最 优 性 质 的 估计 量 ， 一 致 最 优 指 估 计量 一 般 是 不 存在 的 、 在 
$1.4 中 , 我 们 曾 指 出 , 可 以 把 最 优 狂 的 准则 放宽 一 些 , 使 适合 这 种 
最 优 性 淮 则 的 估计 一 般 能 存在 . 这 可 以 解释 为 : 我 们 所 寻求 的 是 
从 某 一 特定 方面 看 具有 最 优 性 的 佑 计量 ， 而 不 要 求 它 在 一 切 方 面 
都 最 优 ， 

但 还 有 另外 一 种 处 理 方 法 ， 我们 先 对 估计 其 的 性 质 作 某 种 特 
定 的 要 求 ， 就 是 说 , 凡 不 满足 这 一 要 求 的 估计 量 , 都 不 在 我 们 考虑 
之 列 ， 把 一 切 适合 这 要 求 的 估计 重 的 全 笨 记 为 多 我们 希望 ， 在 
全 中 找 一 个 一 到 最 优 或 满足 其 它 某 种 最 优 性 标准 的 估计 量 。 这 种 
作法 的 意义 ， 在 于 我 们 先 对 估计 量 要 求 它 在 整体 上 有 较为 良好 的 
性 质 , 然后 再 从 其 中 择优 ， 一 个 在 整体 上 很 坏 的 估计 量 , 在 局 部 上 
也 可 以 有 某 种 优越 性 。 出 如 , 取 5(s) 一 0， 妈 不 论 样 本 如 何 , 总 用 


en 上 1 = 


常数 6 去 估计 9()， 这 当然 是 一 个 不 好 的 估计 重 ， 因为 它 一 点 也 
没有 使 用 辜 本 z 中 的 信息 , 然而, 若 参数 真 值 bo 适合 94 一 6, 则 
上 述 估计 量 是 最 好 的 我 们 必须 先 把 这 样 的 估计 量 竺 弃 , 才能 进 
行 合理 的 比较 . 

在 这 种 要 求 中 , 无 偏 性 是 其 中 最 重要 最 常见 的 一 个 ， 下 面 先 
给 出 无 偏 估计 的 正式 定义 . 

定义 3. 下 ,在 前 于 的 记号 下 , gy (0) 的 估计 量 9 (Go) 称 为 是 无 
侦 的 ,或 者 说 ,8 人) 是 9 (四 的 无 偏 舍 计 , 如果 

BG)) 9 四， 对 任何 9E8, (3.1.1) 

对 随机 化 估计 董 9tw，DD)，(2.1. 妖 相应 地 政 为 


Be( [i967, 2d)=f ep |{ if, a) =9(0), 9€0. 


也 就 是 说 , 如 果 一 个 全 计量 的 理论 均值 等 于 被 估计 簿 , 则 这 佑 计生 
称 为 无 偏 的 . 

在 较 早 期 (部 分 地 可 以 说 直到 现在 ) 的 统计 著作 中 ， 一 般 都 把 
无 偏 狂 放 在 很 显著 的 地 位 。 因 而 在 不 少 和 中 未 汤 形成 了 一 种 看 
法 ,就 是 一 个 佑 计量 要 是 没有 无 偏 性 , 就 是 不 好 的 ， 对 这 一 点 大 致 
可 以 认为 , 除了 后 史 的 原 内 以 外 , 无 偏 司 计 在 数学 上 较 易 处 理 ， 常 
见 的 参数 的 无 偏 估计 不 难 找到 , 以 及 其 较 易 解释 的 直观 含义 等 , 都 
是 原因 ， 在 判决 函数 理论 诞生 以 前 , 参数 佑 计 理 论 的 面 比 较 窗 . 近 
年 来 虽然 发 展 很 快 ,但 多 数 成 果 都 还 未 见 诸 实 际 应 用 ， 因 此 , 无 偏 
估计 仍 保 持 了 它 的 地 位 , 但 是 , 无 论 从 实际 应 用 的 角度 或 是 从 判决 
函数 再 论 的 角度 来 分 析 ， 把 无 偏 性 列 为 对 合计 量 的 当然 要 求 是 可 
以 争论 的 . 

从 实际 应 用 的 角度 看 , 无 仿 估 计 的 意义 在 于 : 当 这 估计 量 经 党 
地 使 用 时 , 它 保证 了 平均 说 来 , 即 在 多 次 重复 的 平均 的 意义 下 , 给 
出 接近 于 真确 值 和 的 估计， 如 果 应 用 土 的 要 求 主要 在 于 这 一 点 , 元 
偏 性 的 要 求 当 然 是 合理 甚至 必须 的 . 不妨 设想 这 样 一 个 例子 ， 某 
工厂 生产 一 各 产品， 其 废品 率 从 较 长 时 期 看 大 体 稳 定 在 一 个 数 入 
上 .现在 每 天 在 所 生产 的 产品 中 作 抽 样 检 验 以 对 zm 作 一 估计 ,就 


和 


逐日 的 结果 而 言 , 自然 难免 偏 高 偏 低 , 但 如 信 计 量 有 无 偏 件 , 在 使 
用 了 几 个 月 之 后 (当然 ,假定 go 一 直 没 有 变化 ), 将 全 部 结果 平均 ， 
就 能 得 出 很 接近 于 po 的 估计， 所 以 ,如果 该 厂 每 日 将 全 部 产品 类 
给 一 家 商店 , 而 该 店 是 按 每 日 的 抽样 度 品 率 的 大 小 来 付款 的 , 则 就 
， 革 一 日 而 言 , 两 方 中 有 一 方 可 能 吃 一 点 亏 , 但 无 偏 性 保证 了 从 较 攻 
时 期 看 ， 办 法 是 公平 的 。 在 这 里 ， 无 偏 性 显然 是 合理 而 必要 的 要 
求 ， 但 在 不 少 应 用 中 ,不 仅 问题 没有 这 种 经 常 性 , 而 且 (或 者 ) 正 、 
焦 偏 差 并 不 能 抵 销 , 在 这 种 情况 下 , 无 偏 性 就 没有 多 大 意义 . 

从 判决 西数 理论 在 问 题 也 显得 很 清楚 , 设 损失 函数 为 
WGg(0), 起 .将 估计 量 9( 罗 重复 使 用 次 ,假定 每 次 参数 值 9 不 
变 ， 且 以 mx 记 第 次 使 用 时 所 得 的 样本 ， 则 这 次 的 平均 损失 为 
二 启 玉 (g(, 9(w))， 如 果 每 次 的 偏差 9 (cb 一 9(O) 都 比较 大 ， 
即使 平均 地 及 训 9oy) ~g(0), 并 不 能 保证 上 述 平均 损失 很 小 . 
在 这 种 情况 下 ， 只 有 当 无 偏 性 的 要 求 有 助 于 使 tx) 与 9(9) 的 距 
高 缩 小 的 情况 下 ,这 个 要 求 才 是 合适 的 ， 

总 之 , 一 方面 应 看 到 , 无 偏 性 是 一 个 重要 而 有 用 的 概念 ; 另 一 
方面 , 应当 根 据 问题 的 性 质 米 估价 这 个 准则 的 作用 , 而 不 能 拘泥 于 
它 . 

在 结束 这 一 段 前 我 们 明确 一 下 ， 无 偏 估计 并 非 在 任何 情况 下 
都 存在 . 
例 2.1.1. 设 下 服从 二 项 分 布 Bm, 6), 0<0<1， 要 信 计 


g00) ~ 言 、 若 引 () 为 无 仿 , 记 96 的 一 a 5~0, 1,…, nm, 将 有 


FD 
这 显然 是 不 可 能 的 ， 因 为 上 式 左边 是 一 个 多项式 ， 而 右边 在 9=0 
处 没有 意义 。 显然 ， 若 9( 站 不 为 次 数 所 4 的 多 项 式 , 8 (全 的 无 仿 
估计 都 不 可 能 存在 . 

例 2.1.2. 设 至 ~ 不 划 力 ， 庄 估计 9 (全 一 局 |， 设 8 为 


a (ra-0"- 于 Oc<0<1. 


无 信 估计 , 则 对 一 co<9<o 有 
590) -| 9 orp (ao 10l. 


但 由 指数 族 的 性 质 ， 知 上 式 中 间 一 项 在 一 oo<9<%0 对 日 有 各 级 
连续 导数 ,而 19| 在 8=0 外 不 可 导 , 因 此 是 不 可 能 的 . 


《二 7 最 小 方差 无 仿 估 计 (Minimum Variance Unbiaged 
Estimate, 简 记 为 MVUE) 


考 虚 上 = 的 情况 , 即 g( 四 为 6 上 的 一 个 数量 函数 . 恨 定 损 
失 函 数 为 
Wg), OD = [gC —a]®, (2.1.2) 
这 种 损失 函数 称 为 平方 损失 函数 , 在 研究 工作 中 使 用 很 多 . 
设 了 人 为 8( 全 的 一 个 无 偏 估计 , 则 其 风险 函数 为 
Ry, H = Boly (0) —9 C0) = Vare (§ (0)), 
. {2.1.8) 
因此 ， 当 限制 于 无 偏 居 计 类 且 损 失 画 数 为 (2.1. 人 时 , 估计 量 的 优 
劣 就 取决 于 其 方差 的 大 小 , 方差 僵 小 的 愈 好 ， 这 个 准则 在 直观 上 
的 意义 也 是 很 清楚 的 , 这 就 导致 下 面 的 定义 : 
定义 2.1.8%, 设 了 的 样本 空间 和 分 布 族 为 (2 多 有) {Po 
9E9}, yg(9) 为 定义 于 人 台 取 值 于 及 的 函数 , 洪 存 在 一 个 无 偏 估 计 
5 使 对 9 的 的 性 何 无 篇 估 计 ,都 有 
Vare( 人 四) 所 Vare( 信 (人 加 )》， 对 一 切 058， 人 久 .1.4) 
则 称 5 为 yg( 提 的 一 个 方差 最 小 无 偏 信 计 《MVUEE). 
在 证 明 关 于 MVUE 的 主要 定理 之 前 ， 先 明确 下 面 的 简单 事 
实 ， 
引 理 2.1.1. 在 定义 3.1.2 揭 记号 下 ， 若 9( 工 ,下 为 任 一 
8 (6) 的 随机 化 无 偏 估计 ， 则 存在 9(9) 之 一 非 随机 无 偏 估 计 了 ww， 
致 在 损失 函数 2-1.2) 之 下 ,有 
Ry, HERGOH, PH 圣 何 6€8. {2.1 


证 “定义 8Ka) 一 三 二 (@, 克 (此 处 为 确定 计 , 设 判决 空间 为 


和 愉 帮 


TE 


《一 co，eo), 这 无 损 于 普遍 性 ), 由 9 的 无 偏 性 , 知 9 《%) ( 除 可 能 一 
了 Po- 零 测 集 外 ) 有 意义 且 乡 为 9 分 的 无 偏 估计 ， 叉 


R(g(0), HD —{ aPol) | [9025 dD, (2.1.6) 
而 
[tg] FC, 而 


= 全 2 gw, df) — 29 0) 三 弛 人 dD + 


-| fF, a4) —29C0)9 C0) +9°(0), (2.1.7) 

用 Seobwartz 不 等 式 , 得 
[re, D> (| 1 DY -FW (2.1.8) 
所以 由 (2.1.) 得 
人 GE-y@]25 dD > 0) 290)9(0) +9(0). 
代入 (2.1.6), 得 
RO, D>| Fw dP -pO) 
= Varp G2)) -Ryn, 用 ， 

这 证 明了 引 理 2.1.1. 

由 这 个 引 理 特别 推出 。 若 存在 一 个 随机 化 的 MVUE, 则 必 
存在 非 随机 化 的 MVUE， 这样 ,在 求 MVUE 时 ,只 考 虞 非 随机 化 
舍 计 就 行 了 ， 事 实 上 , 我 们 可 以 进一步 断言 MVUBE 若 存在 ， 必 
须 是 非 随机 化 的 ， 基 为 ， 要 (2.1.8) 成 立 等 号 ,概率 测 度 了 (z，-) 
必须 集中 于 一 点 , 因此 , 只 有 在 

Petz:gGe，.) 的 测度 集中 于 一 点 }) 1 
时 ,对 这 个 9(2.1. 国 才 成 立 等 号 . 

现在 证 明 下 面 的 重要 定理 , 根据 引 理 2.1.1， 以 下 提 到 的 信 计 
量 全 是 非 随机 化 的 . 

定理 2,1.1 (Lehmann-Soheffe)， 在 定义 2.1.2 的 记 叶 下 ， 


" O55- 


车夫 是 的 一 充分 完全 统计 量 ( 更 确切 地 ， 应 说 i(z) 为 分 布 详 
{P，6E gj 的 充分 完全 统计 量 ， 以 后 我 们 常用 这 个 简单 说 法 ), 则 
a. 若 一 个 只 依赖 于 ie) 的 估计 量 有 GO) 为 g(8) 的 无 偏 估 
计 , 则 它 必 是 9 (人 的 MVTUBE 
b. 这 祥 的 估计 量 最 多 只 有 一 个 (在 概率 为 工 相等 的 意义 下 ). 
e. 若 久 四 是 g( 的 任 一 无 偏 舍 计 ， 现 必 存 在 a 中 所 述 的 
MVUE。、 车 后 者 的 方差 处 处 有 限 ( 在 6 内 )， 则 它 是 9( 急 药 唯 一 
的 MVUED. . 
证 “首先 , 若 存在 两 个 只 依 贺 于 # (ze) 的 ，g (的 的 无 偏 估计 ， 记 
为 加)) 和 h(i(@))， 令 为 = 有 各 一 1 则 如 [区 G2))] =g00) 一 
9g(0) -0 对 一 切 gEB 由 1 的 完全 性 , 知 jg) 一 0(a. 6. Po) 对 
任何 9E@, 这 证 明了 上. 
其 次 , 设 信 人 @) 为 9(B) 之 任 一 无 偏 售 计 , 记 帮 (人 一 再 Cg* 全 
由 # 的 充分 性 ， 此 条 件 期 望 与 9 无关 ， 由 条 件 期 望 性 质 6, 知 
Att(o) ) 为 9(g) 的 无 偏 舍 计 , 我 们 已 证 ， 这 种 只 依赖 于 区 的 无 信 
估计 只 有 一 个 ， 现 证 Vare(g* 四 ) >>Varo[hG (ao)] 对 一 切 9Ee， 
任 取 8E6, 车 Vars(gr(ow)) = co, 则 此 显然 对 , 故 设 Vars Cg"( 工 )) 
一 co。 这 时 有 
Varo(g* (X)) = Eolg' (XH) —y(0)]? 
— Bf[g* (CX) —hGCER)I + CAGECT)) —g (0)1} 
— Eo[g" (KX) —h(t(R))] Varoth(t(X))] 
+2BAty (XK) hER)I DG ER) -gC0)1}, 
2.1.0 
由 条 件 期 望 的 人 性 质 o, g， 及 (五 )) 的 定义 , 知 
BoAfg' CF)— BR LT) ~ gC0)]} 
= BB{fg" (CF) -hTERT)) gO)1 | 
BAGCE)) — gD] B{Tg* (TF) —hR) ID} 
BAIhCGCR)) — 9(0I LB (G(R) 1 ~hC(T))) 
一 由 
1) 参看 杰 章 习 题 她 ， 
有 和 


故 由 全. 工 .的 得 
Vare(g (X)) ~ Vareth(t (RY))] + Bolg* (XY) ~ hs RY]? 
Varsth (CX))]. (2.1.10) 
这 证 明了 hCG()) 为 9 四 的 MVUE， 而 且 ， 要 名 .1.10) 中 等 号 
成 立 , 必需 
Belg (A) 一 下 人 下 下 7))]2 一 0 
而 由 此 又 推出 
hE)) Ca.ePo). 
故 这 证 明了 有 GC 及)) 是 yg(9) 的 唯一 的 (在 前 述 意 义 下 , 以 后 同 此 )》 
MYUE。 定理 证 毕 . 
系 2%.1.1. 设 下 的 分 布 族 为 指数 族 


dPo ly) =0 00) exp(> 0 Tw) )aple), ea. 


点 为 至 的 样本 空间 ( 受 ， 角 四 上 的 o- 有 限 测度 ， 车 日 作为 Bi 的 
子 集 有 内 点 ， 而 h(EC)) 为 gl6) 的 无 妨 佑 守 ， 此 处 tC) 一 
人 人 人 开 )， pp Te())， 则 天 全 ( 开 )) 为 8 信 的 唯一 的 MVUE. 
事实 上 ,在 所 述 条 件 下 , 皇 为 充分 完全 统计 量 ， 故 立即 由 定理 
2.1.1 推 出 所 要 的 结论 . 
例 2.1.3. 由 系 2.1.1 立 即 得 出 一 些 常 见 的 无 偏 情 计 是 
MVUBE， 例如 ， 若 下 …， 于 为.， 一 和 (lw, go 中 出 吝 和 和 


5 六 (X, 一 下 )? 分别 是 sa 和 oa 的 MVUE. 又 在 例 1.5.2 
中 , 这 为 8 的 MVYUE， 叉 车 及, …， 下 。 为 iid,, 也 1 服从 参数 为 
8 的 Poisson 分 布 , 则 豆 为 6 的 MVUE， 根 据 例 .5.8 和 1.6.2, 
车 已，…， 环 。 为 id 下 :~ 尽 (go 9 ， 则 去 [max (ZX3,…; 
+min (ZZ, …， 下 )] 为 玉 : 的 均值 纪 寺 和 的 MVUE( 在 此 需要 


验证 这 个 估计 的 无 偏 性 ,这 是 很 容易 的 ), 等 等 . 
现在 我 们 考虑 儿 个 较 复 杂 的 例子 . 
例 2.1.4, 设 习 b …。 一。 为 id.， 瑟 z 服从 对 数 正 态 分 布 , 即 


r ST- 


log 也: 服从 正 态 分 布 太 (e,， oa、 由 此 容易 得 到 之 1 的 密度 函数 
(对 荆 测 度 ) 为 


(2xo*Y} 13 exp| 一 二 {og w— 上 


《 当 Y>0， 2<0 时 为 0， 
由 此 可 和 写 出 (了 1, …， 王 风 的 联合 密度 ， 并 根据 定理 工 .5.3 和 
1.6.1, 容易 得 出 :1 一 5， 细 ) 为 充分 完全 统计 量 , 其 中 


4 一 二 logs, og mH). 


上 明 fy 本 潮 了 ， hi~Ntg, or/n), tof oe Ei, 
容易 算出 Xi 的 均值 为 ( 记 (a, 0 = 从 


g(0) ~ Bal Xi) -ezp(c+S) (2.1.11) 
证 我 们 要 估计 gg 办， 由 让 ~ 入 (a og3/0， 所 (2.1.11), 知 Bele*) 
~exp(s 十 中) 又 由 tj 他: 易 算得 


五 ， 人 一 各 一 1 


将 有 


如 (WD) 一 总计 ( 守 ) 4- 六) -= 于 (1) 


这 样 ， 若 令 9(2) 一 epG(2)) 站 (fw))， 由 丘 ( 卫 ), 刀 ( 卫 ) 的 独立 
性 ,有 
Bo(G (EX)) 本 Es [htta (TI))] 


~—exp o+ 于 exp( 写 (三 )) 


“op(s+$)-900). 


即 了 入 ) 为 g00) 之 无 偏 估计 ., 由 于 它 是 充分 完全 统计 量 #= (4h, 细 
日 好 二 


的 函数 , 故 必 为 9( 信 的 唯一 的 MVHURE. 
在 本 例 中 ， 一 个 显 而 易 死 的 无 偏 佑 计 是 圣 ， 由 于 它 不 是 的 
应 数 ,根据 定理 2.,1.1, 它 不 可 能 是 yg( 闪 的 MMVUE、 我们 窗 次 见 
到 , 用 样本 均值 估计 总 体 均值 的 优越 性 {就 方差 小 的 标准 而 言 ), 只 
是 在 指数 族 中 才 对 , 在 这 范围 之 外 则 可 能 存在 重 好 的 无 偏 佑 计 ， 
例 23.1.5. 设 变量 于 服从 一 维 指数 族 分 布 
dP,(¢) =0 (0) or (vd, EQ. (2.1.12) 
此 处 妃 为 自然 参数 空间 ,假设 它 有 内 点 ， 令 98( 人 = 外 大 为 自 
热 数 ， 假定 7 中) rt) 的 mw 阶 导 数 ) 在 (一 oo,，o2) 外 姓 存 在 且 
Ermtfw) 在 (一 00， oo) 为 五 可 积 ， 对 加 = 二 多 … 上 我们 来 证 
明 , 车 定义 
站 -人 2 0， 当 r(2) >0, (2.1.18) 
0 : 当 r(w) =0, 
则 5 为 9g 一 站 的 MVUE. 
由 假定 ， 知 i 于 ) 一 为 充分 完全 统计 量 , 故 只 需 证 明 : 了 为 
9) 的 无 偏 估 计 ， 由 已 .1.18), 这 元 异乎 要 证 明 
CD OMe dp, EE (2.1.14) 
由 erre (的 在 (一 ce，cc) 为 天 可 积 知 ， 存 在 一 叫 辐 上 一 < 及 一 
昌 和 1 co 致 恋 oh(a 一 0 eye 人 5- 故 用 分 部 积分 
得 


三 rT (mdr = lm” or rp) de 
lim[e ren (Bo) — eon rt (qn) ] 
bm 
~—lim| “Gor ren (wan 
0] er rw dg, 
重复 以 上 推 趣 , 最 后 得 
[rdo= -Dp err lw), 


1 


这 证 明了 (3.1.14). 
例 如 ， 设 不 1， "ny 也, 为 iid.,， i1~ ND, D. 要 求 久 的 
MYVUE， 由 于 奔 是 0 的 充分 完全 统计 量 ， 只 需 考 虑 基于 于 的 估 


计 ,但 至 ~W(b, 寺 )， 因 此 问题 转化 为 ( 记 w= 部 )， 已 知 xr 
N(9, 土 ), 求 3 的 MVUES(WD. 依 定理 2.1.1, 只 要 能 找 出 印 的 
一 个 无 储 估 计 CD， 则 它 就 是 MYUE， 由 于 (2, 过 ) 的 密度 为 


闪 站 一 KM 一 时 一 > 全 一 889 全 dere” tu 
= 0 er Gn dv, 机 一 500， 
在 新 参数 由 之 下 , 8 (人 一 护 相 应 于 (9) =w* 从 ,到 此 7 
~e /3 因此 由 名 .414.18) 知 , gy(00), 即 如 ,的 MVYUE 为 
9 6F) = (— Dm er (dhen /dyr) | ,sy 
RW — "Le (row/afdyr) ] [ysvny 
一 人 -Was nm 有). 
这 里 囊 是 Hermite 多 项 式 , 定义 为 
(DD*H@) = ee ad EE=1, 2, +, Ho=1. 
有 吾 1(w) 一 4#， 其 余 的 可 用 递 推 公式 
Hanal®) 一 4 再 (0 — nH lw), n=1, ,+ 
定 出 , 利用 已 得 结果 , 可 求 出 任 一 密 项 式 y( 介 一 G0 十 9 十 -十 a * 
的 MVYUE. 
从 定理 2.1.1 的 证 明知 道 ， 具 要 # 是 一 个 完全 充分 统计 量 ， 
而 gg() 是 g( 胃 的 任 一 无 偏 悄 计 ， 那 么 耳 (p( 玉 ) | 及 就 是 9 全 的 
MVUE. 使 用 这 个 方法 ， 首 先 得 设法 看 出 一 个 无 偏 估计 。 然后 再 
计算 吾 爷 ( 增 ) 上。 这 两 步 中 的 任 一 步 都 可 能 并 不 容易 . 
例 2.1.6. 设 五 1 …, 在。 为 i 刘 .至 1 一 easy 8=(g, oa), 


要 估计 9 (9) = P(X1>0) 1 一 全 (2 一) 多 为 术 (0， 了 D 的 分 布 


函数 , 6 已 知 ， 这 问题 的 实际 背景 是 ， 某 产品 的 某 项 指标 ,要求 超 
过 4。 才 算 合格 ,要 估计 其 合格 率 ， 


1 00 。 


显然 , p( 瑟 ) = Tirva( 人 是 9 信之 一 无 偏 估 计 , 又 二 (全 3 
为 完全 充分 统计 量 , 此 处 ?一 二 寥 (和 一 已 * 因此 , 909) 的 


唯一 的 MVUE 为 
h(Y, 5) = P(T1>0l, A) 


P(E > Me |¥, 8) 


-Pu>w|, A). 


Mn (Zi 一 至 ) Vn 
此 处 %= ms ? Lo mn— Ds 我 们 将 证 明 ; 


2&2. 昼 ,， 5, w 相互 独立 ， 
b. w% 的 密度 函数 (对 工 测度) 为 
r( ?本 


0 


为 此 作 正 交 变 换 
Ti Vn (Xt “十 互 。， 


TY 
Dt) 
YO tOnF ,SS=8, 


这 里 Gy 只 要 能 构成 正 交 变换 就 行 ， 虚 引 理 14.1.1, 知 五， 了， 
独立 ， Y ~N(CV na, oN, Yi~N OO, on), 4 一 2 .…, n. 且 


(n— 1)8*— > PD 


我 们 要 证 明 训 与 独立 ， 且 女 有 分 布 (2.1.1 四 ， 不 失 普 遍 性 可 设 
0 一 二 则 问题 归结 为 证 明 : 车工 ,， 人 独立 ， Y~N(O, 1), pe 


* 101*» 


Qe)?， 当 |z| < 了 


， 当 |w| 宇 1. 
(2.1.15) 


pp ea a i - 


则 v= pr 与 0 了 ?十 2 独立 ,上 且 有 分 布 人 2.1.1 四 ， 册 


《了 ,名 ) 的 联合 密度 及 上 述 变 换 的 形式 ( 朔 变 换 为 了 一 wv 2 ,ZZ 
V1 一 0 站), 易 得 (名 的 联合 密度 为 


1 oe- 笃 - 1 了 
Ee 
- [VT( 和 2 -2)] (uw 让 82， 
( 尖 la < 二 wo>0 其 它 地 方 为 0。 
这 证 明了 声 4 独立, 且 世 之 密度 为 @@.1.1 人 总， 
现在 可 以 算出 (注意 0 = 所 (一 区 ): 当 |wj 之 1 时 
h( 玉 , 8) = P(XY1>o| 时 ， -| f(D) du 


9(Yy, 办 
6, oD) 


Y= 
大 二 让 (二 一 直下 


i 针 一 L wjdu， 当 0<au<z 


| B (二 如 一 ta) 当 一 1<am<0. 
(2.1.16) 
又 办 忱 ,加 一 0 省 W>1 有 (下 局 一 二 当 tw 忆 一 1， 此 处 


， T+) ， 
po b, 5-|7ofrer* QD 当 0<a<d 
0, 其 它 必 


(2.1.17) 

称 为 带 参 数 4,5 的 8- 分 布 , sa>0 8>>0.、 因此 ， 在 实际 应 用 中 ， 
步 缀 是 先 算出 wo, 再 按 (2.1.16), 异 助 于 局 分 布吉, 算出 大 ( 正 ,， 司 
之 值 . 

在 此 例 中 , 有 一 显然 的 无 偏 估计 存在 , 比较 麻烦 的 是 求 条 件 期 
望 . 下 例 则 相反 . 

例 2.1.7. 设 6<3. 5 可 以 为 一 co, 5 可 以 为 co、 瑞 数 (2) 
定义 于 他， 四, 非 负 , 31-~ 可 测 , 且 对 任何 9E (a, 队 , 有 


1 rb ， 
5 的 aos co (2.1.18) 
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现 设 也 …， 王 。 为 iid. 样本 ， 工 : 的 密度 函数 为 (对 工 测度 ) 
六 0- 人 ee (2.1.18) 

参数 空间 为 日 = (4, 办、 设 9 全 为 给 定 在 (a, 加 上 的 函数 ， 要 求 
9 四 的 MYUE. 

记 于 只 =min{ 脏 1，…， 王 路， 不 难 证 朋 ， 芒 gy 为 8 的 充分 完 
全 统计 量 . 我 们 把 这 个 容易 证 由 的 事实 禄 给 读者 (类 似 于 第 一 章 
的 习题 30) 因此, 若 能 找到 Y (人 的 一 个 无 偏 估计 , 且 这 个 无 偏 怖 
计 只 依赖 于 一 个 观察 值 ， 因 之 可 记 为 p(s1), 则 将 有 : 8(Eco) 一 
万 (p(t) | 玉 )) 为 9 太 的 MVUE 易 见 


m1 ee 


9 CF) -Lp(X) 十 一 一 一 
厂 hay 


(2.1.20) 
这 是 因为 , 在 给 了 互 m 的 条 件 下 ， 马 : 有 二 的 可 能 性 到 瑟 a( 注 意 
1， …， 及 为 1 所 8,) ,而 在 ZX: 水 cn( 可 能 性 为 2 时， 薪 
在 (下 内 , 且 在 其 内 的 (条 件 ) 分 布 密度 为 及 ( 殷 让 MyYay (请 
读者 委 己 给 出 严格 证 明 ). 


因此 , 闷 题 归结 为 找 出 pg( 卫 DD， 根据 (DD 为 g( 扩 的 泡 偏 怖 
计 的 要 求 , 它 必须 满足 关系 式 


KO | ph d=g0), a<0<b, (2.1.21) 


为 此 必须 
EK’'Of pW Rd E Op ONG) ~g 0), a<0<s. 
再 出 届 ,1.2 匀 得 
EK'(0)g(0) — EWp(Oh) =g' (0) ER (0), a<0<b. 
由 此 解 出 
pg 的 = [EK'(Wg0) —g OE (W/LE* (AO]. 
(2.1.22) 
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(在 有 (2) =0 的 地 方 , p(%?) 可 令 为 从 ， 

当然 ， 上 述 推 理 只 是 证 明了 ; 要 是 g{ 区 存在 ， 它 必须 由 
(2.1.22) 定 出 , 还 需要 证 明 : 这 样 定 出 的 9 确实 满足 要 求 ， 这 涡 要 
加 一 定 的 条 件 ( 见 本 章 习题 号. 

例 2.1.8. 本 例 的 一 个 特点 基 参 数 空间 不 是 欧 氏 空间 ， 以 
有 多: 记 一 切 鬼 值 存在 有 限 的 一 维 分 布 族 , 对 任何 了 EI, 以 (8) 


记 均 值 | 站”.mdF(w)， 设 了 …， 玉 ,为 tid. 样本 , 下: 的 分 布 


了 FEZI， 剖 求 6( 相 的 MYUB， 根据 侧 1.8.4 和 二.6,4, 对 多 1 
来 说 ,次序 统计 量 #+= (好 t0，… 六 om) 是 完全 充分 统计 量 ， 因 此 ， 
只 需 找 出 一 个 只 依 束 于 # 的 无 赃 估 计 ， 换 名 话说 ， 搁 出 一 个 作为 
2 的 对 称 Bu- 可 测 的 无 偏 佑 计 了 (cs，…， 吕 .显然 ,样本 均 


值 忆 = 土 包 mw 就 是 这 样 一 个 估计 量 ， 因 此 , 于 就 是 9C7) 的 
MVUE. 

同样 , 洲 以 .9 记 一 切 其 方差 存在 有 限 的 一 维 分 布 族 , 对 任何 
FE 9 定义 g(8] 分 布 卫 的 方差, 及 …， Xs 为 .样本 ， 
了 的 分 布 了 EZ, 则 6( 本 的 MYVUB 就 是 通常 的 样本 方差 


各 一 一 高 6 一 到 。， 类 似 地 可 以 得 到 高 阶 拭 和 其 他 种 种 与 分 


布 有 关 的 量 的 MVUE， 以 后 我 们 还 有 机 会 讨论 这 个 问题 . 

用 定理 2.1.1 求 MVUE 的 基本 要 求 ， 在 于 要 存在 一 个 完全 
充分 统计 量 ， 在 Qauchy 分 布 的 捕 况 ， 曙 则 对 样本 大 小 n>3 时 ， 
套数 8 的 无 偏 估计 存在 , 但 无 法 求 得 其 MVUE, 

下 面 的 定理 有 著 有 助 了 于 验证 一 个 无 入 估 计 鸭 加 VUEB。 为 了 
得 到 较为 普遍 的 形式 , 我 们 引进 如 下 的 概念 。 设 蕊 为 y( 由 的 一 族 
无 偏 估计 , 车 5 了 EB 且 对 任何 gE 有 

Va 2 Var 对 一 切 9E€0. (2.,1.28) 
则 称 9 为 9( 四 在 中 的 MVDE. 

定理 和 .1.2.。 设 避 为 g( 四 的 一 个 元 偏 估 计 族 .Zo 为 0 的 无 

篇 估计 族 ( 即 车 EGo, 则 加 (h(X)) =0 对 任何 9656). 荐 9E@ 


满足 下 面 两 个 条 件 . 

&，Vars( 介 < 之 oo 对 任何 9E09. 

b. 车 Eco 且 Vare(h( 卫 )) < 之 oo 对 某 个 05 如, 则 对 这 个 
必 成 立 Covs($, 月 =0(Covr 你 有司 宪 9) 和 ACE) 的 协 方差)， 出 
5 为 g(D 在 8 中 的 MVUER. 

证 . 设 了 E58 满足 条 件 <, 5， 任 取 gE@， 则 显然 一 一 
9Eeo. 任 取 6E6. 若 Varo(g =co 则 必 有 Vars(g") >>Vars (0)， 
而 车 Vars (的 <co, 则 Vare( 太 之 coo， 因而 根据 5 有 Cove 略 ,用 
一 0， 族 

Vare (og) = Vare (办 + Vars (hh Vars (办 _ 
这 证 明了 名 .1.23), 因 而 了 为 9( 四 在 中 的 MVUE. 

举 一 个 简单 例子 说 明 本 定理 的 应 用 ， 设 蔗 1,-…， 玉 。 为 iid. 
样本 ， 瑟 ~ 下 人 a, 8 一 (a 0， 要求 g( 四 =a 的 MVUE.， 者 
虑 估计 量 及， 它 是 yg(9) 的 无 篇 合计 ， 方差 有 限 ， 现 设 f(w) = 
了 (ty 20 为 0 的 无 篇 估计 , 且 Vars( 有 ) 之 oo 对 某 个 8 则 由 


jz ee Vs) 四 Ca Dr go) 人 
xexp( 一 了 = 交 (mi—0) ja ‘r=0, .1.2 
对 任何 “和 > 和 根据 定理 1.2.1, 可 以 在 积分 导 下 对 4 求 导 
《为 了 完全 切合 定理 工 .3.1 的 形式 , 可 在 上 式 中 国定 o), 得 
ff 7 -VD 
xezxp( 一 二 5 2 人 一 由 ?) da a tr =0, 
即 Govoe(f, 时 ) 一 0 依 定理 2.1.2, 知 全 为 a=g( 的 的 MVUE 
上 述 证 明 完 全 是 初等 的 . 
在 结束 这 一 段 以 前 我 们 简略 地 提 到 一 下 所 谓 “ 局 部 最 小 方差 
无 偏 估计 ”( 简 记 为 LMYVUB) 的 概念 ， 
定义 2.1.8. 设 了 为 yg( 四 的 泡 偏 估计 , 页 EB， 若 对 g( 四 的 
性 何 元 偏 全 计 赤 , 必 有 Vars 4 ) DEVaro( 克 ， 网 称 了 为 了 (的 在 
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Ot mite ee th re re i i el 


=w 处 的 LMVUE. 

显然 ， 著 了 为 g (的 MVUE, 则 对 任何 如 EB, 了 为 g( 四 在 
D6 处 的 LMVUE， 不 是 MVUE 的 LMYUE 的 例子 可 以 人 为 地 辕 
出 来 , 得 在 有 实际 意义 的 场合 下 少见。 也 可 以 举 出 在 某 个 特定 的 
bo 处 的 LMVUE 不 存在 的 例子 ， 


“三 7 推广 到 西 损失 函数 的 情况 


上 一 所 所 处 再 的 平方 损失 函数 是 凸 损失 函数 的 特例 ， 定理 
3.1.1 可 相应 地 推广 到 这 种 损失 函数 的 情况 . 

设 了 (人 是 定义 在 肌 或 其 一 区 间 上 的 有 限 实 值 函数 落 对 了 
的 定义 域内 任意 两 点 名 和 及 0&a&1l, 必 有 

fart -DD Ea WD +I-DID. .1.25 
出 称 子 为 瑟 画 数 ， 若 当 ezqgyg 且 0<a<1 时 , (2.1.26) 的 不 等 号 必 
成 立 , 则 称 了 为 严 凸 的 ， 我 们 来 证 明 下 面 的 引 理 ， 

引 理 名 .1.2%、 设 了 为 定义 在 局 的 区 间 工 有限 或 无 眼 ) 上 的 
四 函数 。 了 为 一 随机 变量 , 满足 条 件 王 ( 瑟 E 厂 一 1 且 吾 ( 王 ) 存 
在 有 限 , 则 ， 
Ef(X)) > BR)). (2.1.26) 
车 疗 在 了 上 为 严 凸 的 ， 则 等 号 当 生 仅 当 P(X=B(X)) -1 
时 才 成 立 (号 不 等 式 叫 
Jessen 不 等 式 )， 

证 . 由 假定 易 见 
(YET 点 (BCZ), 
fF(B(X))0 莫 在 曲线 y= 
F(z) 上 ,由 孟 数 开航 同性 ， 

-sl -一 一 一 一 ”存在 一 条 过 此 点 的 直线 加 

《 见 图 2-1)， 其 方程 设 为 
y= EB(A)) 
图 2 +al(e— BE(X)), 
致 曲线 %= 人 Go) 全 在 天 直线 由 的 上 方 。 这 就 是 说 


* ID6 。 


(EC CEOON 


了 (人 BRE) tes — BX)), rEI (2.1.27) 


由 2.1.27), 以 及 卫 ( 瑟 ) 存 在 有 限 , 知 瓦 (FE 存在 (可 为 co)， 
且 由 PCEDD=1 知 
EFAXIPAEHE)) +a BI — BX) -fF(E(X)). 
(2.1.98) 
这 证 明了 引 理 的 前 半 ， 若 了 在 工 上 严 凸 , 则 届 .1. 欠 ) 中 等 号 只 在 
名 二 她 ( 蔬 ) 外 成 立 , 这 出 除非 三 ( 芝 一 吾 ( 王 )) =1, 必 有 
i 
从 而 在 位 江 .88) 中 必 成 立 不 等 号 .证 毕 ， 
现在 设 变 莉 互 有 欧 氏 样本 空间 (有 2， 圾 m， 其 分 布 族 为 
{Po 9Eg 人 判决 空间 ( 纺 ， 级 m) 为 一 维 欧 氏 的 ， 其 中 多 为 豆 或 
其 一 区 间 , 损失 痪 煞 了 人 专 力 ， 对 枉 何 固定 的 9E9Q 为 6 在 人 铺 上 的 
凸 函数 、 设 (全 为 定义 在 马上 的 函数 ， 我 们 想 要 在 8(B) 的 一 切 
无 偏 估计 中 找 出 一 个 名 使 其 风险 函数 在 无 偏 估 计 族 中 一 致 地 (对 
8E8) 达 到 最 小 ,在 上 上 (@, 办 = 了 的 一 办 ?的 情况 ,就 加 到 (二 ) 中 
讨论 的 问题 ， 注 意 在 此 并 未 假定 工 雪 , 中 是 yt8) 的 函数 , 
下 面 的 引 理 类 似 于 引 理 2.1.1. 
引 理 2.1.3. 设 损 失 画 数 工 (6, 国 为 4 的 凸 丁 数 ， 则 对 9 的 
的 任何 随机 化 无 偏 估计 5, 必 存 在 9 (多 的 非 随机 化 无 偏 佑 计 5， 
致 
RG, EROG, WB 对 一 切 EN (2.1.29) 
车 也 已 同 为 8 的 严 同 函数 , 则 对 任何 8E98,， 除非 
Pit2:3t， 功 的 测度 集中 于 一 点 }) = 
在 公民 .38) 中 必 成 立 不 等 号 . 


证 ， 令 (= |. 引 (w, dD)， 则 如 引 理 2.1.1 证 明 中 据 出 的 ， 
8*(w) 为 gC0) 的 无 篇 信 计 ， 又 
R(O, $) -| aP,(e)) LO, 8(%, ad), (2.1.30) 
依 引 至 2.1.2, 有 
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ze Bw, df) LO, 8 (8)), (2.1.81) 


代入 (2.1.80) 即 得 (2.1.29)。， 车 (9, 只 为 的 严 同 函数 ， 则 除 
非 5 人， 的 测度 集中 于 一 点 , 在 公 .1.314) 中 将 成 立 不 筹 号 ， 因 
此 ， 除 非 对 所 有 的 w( 最 宪 有 一 个 已- 零 测 集 的 例外 ) 这 条 件 都 满 
足 , (32..80) 中 的 不 等 号 必 成 立 ， 引 理 证 毕 . 
从 这 个 引 理 看 出 ,在 损失 函数 为 凸 函 数 时 , 不 癌 考 赔 随 机 化 的 
估计 . 
定理 2.1.3. 在 前 述 记 号 下 , 设 工 但, 四 为 的 是 函数 , 又 设 
存在 6 的 一 个 完全 讽 分 统计 重 i( 咏 , 则 
a. 9(0) 的 基于 #(%) 的 无 偏 司 计 最 多 只 有 一 个 , 车 h(t(@)) 是 
这 种 估计 ， 则 其 风险 函数 在 g (6) 的 无 情 估 计 中 一 致 地 (对 9Eg 
达到 最 小 、 若 五 侈 四 对 4 为 严 凸 的 , 则 为 G0) 是 唯一 的 具有 这 
种 性 质 的 无 偏 慎 计 . 
Db.、 设 8 人 为 9 全 之 任 一 尖 仿 估计 而 
网 RG)) = BOGE) te)), 
RO, DRO, PD 对 一 切 8E8, (2.1.32) 
且 只 在 
Po Cm: C0) ~ hn) 1 (2.1.88) 
时 , (2,1.,32) 中 的 等 号 对 这 个 86 才 成 立 。 
证 .由 于 很 定 了 样本 空间 (全 雳 四 是 欧 氏 的 , 恢 定 理 1.3.1, 
存在 正则 条 和 牢 概 率 PPG， 心 ， 有 (下 直 .3.2 卫 式 ) 


BOE) | FW PE , A) hb 0)), 


由 于 . 
BR(O, D = EoD, FL))) = Bo{ BolL C0, 9(3)) 上 


-| 2PO| ze FW)P GC), oy), 
恢 引 理 2.1.2, 得 
jG, Fe PE, dg) LG, RGCo))), .1.84) 
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代入 上 式 即 得 (2.1.82). 

车 了 地力 为 的 严 凸 函数 , 则 (2.1.34) 只 在 了 PG), 四) 入 
中 于 一 点 时 才 成 立 等 号 ， 因 此 ,对 任何 9, 只 有 在 名 . 工 .833) 成 立时 
(对 这 个 胃 ，(3.1.8 罗 中 的 等 号 对 这 个 9 才能 成 立 ， 叉 由 # 的 完 
全 性 ， 基 于 (9) 的 y( 办 的 无 偏 居 计 不 能 有 多 于 一 个 ， 这 就 证 明了 
定理 2.1.8. 


凸 损失 函数 最 常见 的 例子 是 
LO, 国 =19G) al 1< 开 <co， (2.1.85) 
此 处 不 必 为 整数 . 


§2.2， Cramer-Rao 型 不 等 式 


前 节 讨 论 的 中 心 问题 是 , 求 9(9) 的 无 偏 佑 计 ， 使 其 方差 尽 可 
能 小 ， 一 般 地 说 不 难 设想 ; 在 一 定 的 样本 大 小 之 下 , 这 个 方差 不 可 
能 任意 地 接近 于 0， 即 有 一 个 大 于 0( 但 与 8 有 关 ) 的 下 界 . 本 节 
的 目的 就 是 研究 这 个 下 界 及 与 之 有 关 的 问题 . 它 的 基本 缚 果 是 
Oramer 和 Rao 在 1945~46 年 证 明 的 一 个 不 等 式 ， 以 后 (直到 最 
近 ) 一 些 学 者 将 条 性 作 了 些 改 进 和 精确 化 , 但 结果 的 基本 形式 并 无 
重大 改变 ， 以 下 我 们 将 Cramer-Rao 型 不 等 式 衔 称 为 CR 不 等 
式 . 


(一 ) 单 参数 情况 的 CO 不 符 式 


假定 变量 节 的 样本 空间 为 (及 ， 罗 w), 其 分 布 族 为 {Ps, 9€8}. 
设 这 分 布 族 为 绍 s 上 之 一 rc 有限 测 度 凡 所 控制 ， 记 了 (内 = 
ae yu， 我 们 列举 所 加 的 正则 条 件 如 下 : 

i. 如 为 吕 的 开 区 间 . 


2. 对 在 何 E22 及 8E86, Fo 办 >0 且 af Cs, 全 存在 . 
3. B, (LRf FE ) -| HG 0 de)-0, 任何 ge 
* OP 


pp 


4. 对 任何 8E8, 有 
eal) 
-| (S82 0 “fl, Dants) = 1 0). 


5. Af 入 对 任何 圈定 的 we 为 9 在 日 上 的 连续 函数 . 


定理 23.%.1. 设 上 述 假定 1~4 成 立 , g( 办 为 定义 在 人 台 上 的 
有 限 实 值 画 数 , 且 gt9) 在 日 处 处 存在 ， 则 若 9(%) 为 g(0) 之 任 一 
无 偏 佑 计 , 满足 条 性 . 


6. ] .37(o 外 dp (0 可 在 积分 号 下 对 09 求 导 ， 则 有 
We ee (2.2.1) 
地 .3. 了 就 是 CR 不 等 式 . 
证 . 不 妨 设 了 (从 <co 且 Vars (内 一 co, 否则 @.2.1) 显然 . 
Slw, O) -ef 人 (2.2.2) 


由 由 条 件 3, 4 知 oCS(XY, 从) 0, 0<Vars(S(X, 罗 ) <oo. 所 
以 由 了 的 无 偏 性 及 假定 6, 得 
Cova G(X), SFE, 0)) ~ BlG(F)SCX, 0)] 
-| $0 Ef fe, 0 ape) 


-| -BG fe, Odple) 


记 


~ 9(0) = (0), (2.2.8) 
因此 
Vare(@) ‘Varo(S(X, 0)) 0ovig, SCE, ) ~ (gO) 
(2.2.4) 


注意 到 Vars(8 (了 ,四 ) 一 书 [S2( 开 人], 根 据 假定 生 由 (2.2.4 
立 得 (2.2.1)， 
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O- 了 不 等 式 人 .2.1) 给 9 人 的 的 无 偏 估计 的 方差 一 个 下 界 . 这 
个 下 界 称 为 C-R 下 界 ， 因 此 , 如 果 一 个 无 偏 估 计 3 的 方差 达到 这 
个 下 界 ， 且 g( 的 的 一 切 无 偏 估计 都 满足 条 件 6 则 就 是 y(2) 的 
MVYUE， 所 以 , 0-R 不 等 式 也 可 视 为 验证 某 一 无 偏 估 计 是 否 为 
MVYUE 的 方法 . 

上 述 定 理 的 弱点 在 于 条件 6 与 每 个 具体 的 无 偏 居 计 有 关 . 如 
果 能 将 施加 的 条 件 转化 到 分 布 族 上 而 不 涉及 每 一 基体 的 如 当然 
就 更 好 .下 面 的 引 理 提供 了 一 个 充分 条 件 . 

引 理 .2.1， 车 前 述 杂 件 1 和 23 成立， 且 丰 在 定义 于 全 Xx 日 
上 的 函数 Ge, 从, 满足 以 下 的 条 件 : 

a. 对 任何 8E9, Gr, 站 为 4 的 多 -可 测 通 数 ， 

b. ErLO(X, D0, 对 性 柯 8E@, 

0o， 对 托 何 8E8 存在 o>0, 致 

| 全 名 虹 |<Glo, WFC, 的, 对 任何 sE 线 及 19-|<e 


则 正则 条 件 3 满足 , 且 对 9 (2) 的 任何 无 偏 估计 8 (o) ,车 在 点 2E@ 
有 VaroGf(CE)) <co, 则 
[$0 EG i = 0. (2.2.5) 
后 一 等 式 正 是 在 证 明 0-B 不 等 式 时 用 到 的 , 
证 . 任职 9E6. 若 |091<so, 0'E9, 则 因 | fl%, 0)dp2) 
~1 对 任何 E 6, 有 
{ {tf Cs, 9 -1 0)]/ (0-0) dus) —0. 
但 由 正则 条 件 2 知 
| 人， DD {%, 分 |- 人 (ww, | 
0 Ey 
对 某 个 出 E (0 一 86, 9 十 80)， 
此 处 风 可 与 有关、 由 引 理 的 条 件 6， 知 
EYED |< of 0 @.2 


s lls 


me (人 HF, Wap le) = BtGX, OY {BAG KX, DI 
09, 蕉 由 控制 收 钱 定理 ,有 
| G0 00%) -in| 站 


a 
六 证 明 本 正骨 第 

其 次 ， 设 9 (四 为 g( 辐 的 无 从 估计 ， 且 Vare( 们 <ooe 对 某 个 
ce， 由 


(fw Le DFE gee) ~ LDF. .2.7) 
册 人 2.2.6)， 当 10 一 好 | 一 es 了 时 ,有 (邦人 .2. 的 ) 
HOLE DE | <9 a Of le 9). 


而 
| .al gj Od Co) ~ BLlG CF) GZ, ] 
{Bol K)] BLOCER, W100. 
故 由 控制 收敛 定理 , 在 人 2.2. 信 两边 令 ->9, 得 
OA TA 
引 理 证 毕 ， 

一 个 重要 的 情况 是 变量 互 服从 指数 族 分 布 ， 在 这 种 情况 下 ， 
以 上 的 条 件 1~5 都 适合 , 县 对 任何 无 偏 佑 计 包 条件 6 也 适合 .这 
是 定理 1.2.1 的 直接 结果 ， 举 一 个 简单 例子 . 

例 2.2.1. 设 下 + yy 不 ， 为 iid., 下 1 ~ NO, 0 人 9， 对 求 吧 
的 MVUE，( 玉 1,…， 了 肝 收 的 联合 闪 度 为 (对 工 测度 ) 

(Fi) ee( 一 站 中 ) 记 为 fo 9). 
着 记 0- -于 了 人 一 沪 民 , 则 可 写 为 

了 (ze 0) = (2%) -22n03( 一 分 waexp(gT (人 )， 一 co<g<0. 

要 估计 的 是 9(9) ~ 一 (290)-1。 易 见 
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LE ee 


a1 区 3 
(2 ]- mm [zco- 雪 ]- 闷 
故 得 O-R 下 界 为 
OBE ) | mgr 
但 若 取 8(X) 一 二 高?， 则 易 见 5 为 0 的 无 偏 舍 计 , 且 Var (9 


-2 即 5 处 处 达到 O-R 下 界 。 由 于 一 切 无 偏 估计 都 适合 条 


件 6, 知 了 就 是 o? 的 MVUE. 

应 用 这 个 方法 , 可 以 验证 某 些 其 它 常见 的 分 布 族 中 , 通常 的 佑 
计 都 是 MYUE、， 例 如 ， 用 长 居 计 入 (9, 苇 的 二 项 分 布 的 种、 
波 娃 松 分 布 的 参数 入 等 。 于 一段 中 我 们 将 证 明 , 在 前 述 正则 条 性 
下 能 够 处 处 达到 台 - 及 下 内 的 , 也 只 限于 在 指数 族 的 稍 襄 . 

在 应 用 上 常见 的 一 种 情况 是 ， 互 一 《4 王 …， 下 下 2 玉 
为 iid. 样本 ， 每 个 也 ,的 样本 空间 都 是 (名 0o, 多 o]， 分 布 族 则 为 
{Poe, 8EB}. 这 时 三 的 样本 空间 为 

(2 Ba) = (Box Ro 0， 
蒜 的 分 布 族 为 {Po, 8E€B}, 其 中 
了 一 了 oo x Poo XXX Pog. 
车 {Po, 8EG} 为 艺 e 上 之 一 ec 有 限 测 度 no 所 控制 ， 记 folro) 一 
QPoe lwo) /duo， 则 {Pe DOEeB 为 及 < 上 的 cc 有 限 测 魔 凡 = joX iio 
Xx…Xn 所 控制 , 有 是 
fr, 太一 GPa 一 六 人 OD fo ls, 从， 

容易 看 到 : 车 {foltro, 内 ,98E 引 渍 足 正则 笨 忻 1~5, 则 {Fa， 站， 
EE} 也 满足 正则 条 件 1~58， 我 们 把 这 一 简单 事实 的 验证 留 给 读 
者 . 然而 , 条 件 6 的 验证 不 能 归结 到 单个 的 下, 的 分 布 上 . 

在 上 述 情 况 下 易 见 


l(t 2) ] -nao ©) 


(2.2.8) 
由 已 .2. 妨 可知， 在 这 时 C- 有 下界 有 Cojm 的 形状 06320 与 % 无 


»1iBe 


Oe 


关 ， 换 名 话说 ,在 正则 条 件 下 , 随 着 样本 大 小 w 的 增加 ,MYVU 卫 的 
方差 是 以 二 的 数量级 趋 于 0( 除 非 在 该 点 9 (9) =0)， 但 是 , 在 非 


正则 的 情况 下 , 这 个 界 服 可 能 打破 ， 

例 2.2.2， 设 及 …, 也 ,为 i 所 . 样本 , 下 ,~RO0, 站 ,89>0， 
设 y(9)=-9. g(0) 的 MVUE 为 人 DD) 一 2 上 max{m,…, oj. 容易 
算出 ，Vars( 信 一 GF， 它 以 0( 认 的 数量 级 趋 于 0, 容易 验证 ， 


在 此 正则 条 性 不 满足 ， 所 以 ,就 本 例 而 言 , 元 法 用 0-R 不 等 式 求 
得 和 的 MVUE, 


二) 等 号 成 立 的 条 件 


定理 2.8.2， 在 前 面 的 记号 下 ， 设 正 唱 条 伞 1~5 满足 , 了 (2) 
为 8( 全 之 一 无 偏 佑 计 ,y( 人 在 如 上 不 恒 等 于 常数 ，Vare(8( 交 )) 
<ee 对 任何 9EB， 则 0-R 不 等 式 (2.23. 卫 中 的 等 号 对 一 切 0E 
都 成 立 的 充分 必要 条 件 是 , 存在 玖 E 地 。，1( 玉 )] 一 0 臻 

fr DCMDROED ,rEEK, C6, 2.2. 
且 这 时 C9), 灿 ( 四 必 为 9 的 连续 可 导 函 数 ， 同 时 由 (外 0 在 6 
上 处 处 成 立 . 

证 . 首先 注意 ， 出 定理 2.2.1 的 证 明 过 程 中 看 出 ,要 CO- 及 不 
等 式 在 某 点 8 处 成 立 等 号 ,在 (2.2. 划 中 必须 成 立 等 号 (对 这 个 从 ， 
而 这 一 点 的 充 要 条 件 为 ,存在 a( 俱 , 8 的 ,YY(), 不 同时 为 0, 至 

a GW) +AO SE, D+yO ~0, 对 z (a.0.Po). 

此 式 两 边 求 均值 ， 并 注意 盏 区 (ZZ 们 ] 一 0,， Be G(X)) =g( 扑 ,可 
将 其 改写 为 
oD [G0 一 多 的 ] +BO Ss, =0, 对 za.e.Py. 

{2.2.10) 
易 见 a( 四 和 BD) 都 不 能 为 0. 事实 上 , 车 a 外) 一 0, 则 因 8 (区 0, 
必 有 局 (mm 的 一 0 对 w(z.6.Ps), 注意 到 避 .2.2)， 这 遇 然 与 正则 
条 作 4 矛盾 ， 若 8) = 0 则 at 0, 这 时 580) = 9 的， 对 
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wv(a.6.Pe), 因而 将 有 909) 一 Br [5X)] =9( 的 ,对 任何 由 E89, 这 
与 9( 从 在 昌 8 上 不 恒 等 于 常数 予 拓 。 因此 ，a( 闪 , 8( 四 都 不 为 0， 
从 而 人 名 .2.100 可 改写 为 
Sw, 的 一 (全 [全 一 9 的 ] 对 whae.Po). (2.2.11) 
车 C-R 不 等 式 的 等 号 对 一 切 9E6 成立, 则 名 .2.1) 对 一 切 0E 台 
成 立 . 
现 设 (2.2. 久 成 立 ， 则 由 产 人 Go 由 在 上 处 处 大 于 0 知 OQ(6) 
之 0 及 有 (wm) >0、 故 可 写 
logf (%, DD 一 10g hm) +log etd) 
thDI, rEE, §€0, 
必 在 在 ER, mwERK, 到 9(wi) 天 (va), 因 车 不 然 , 由 wt) 一 0 
将 得 了 (下 ) 以 概率 为 1 等 于 一 常数 ， 这 时 9g(9) 一 Bo( 罗 在 8 上 也 
将 为 一 常数 , 与 假定 矛盾 ， 取 这 样 的 丙 个 my, aa 代入 上 式 并 相 减 ， 
.得 
log f wi, OD — Yog Ff (2a, 0 —log hw) 一 log h(xa) 
十 让 (加 [Fle —§ 2) ]. 
自 此 式 ， 利 用 正则 条 件 2 及 8(on 一 9 C89) 关 0， 知 由 (全 在 中 连续 
可 导 , 故 心 份 在 怠 也 连续 可 导 .， 因而 
Su 0) ~ af 全 


-SH + DI, EK, 9€®, 


由 此 可 知 岂 人 鸭 关 0 不 然 会 与 正则 条 件 4 矛 盾 ， 由 上 式 及 


BsLS(X, 9] 0 知人 0 全 一 一 由 (0)g(6)， 由 此 知 (2.2,11) 对 


任何 8E 如 成 立 ， 帮 Yars( 的 处 处 达到 C 及 不 等 式 的 界 起 .由 
则 (从 存在 非 0 对 一 切 9E 印 可 知 业 在 8 上 严格 单调 ， 放 通过 改 
变 参 数 , 可 把 .2. 引 化 为 自然 形式 (1 .2.10). 
反 过 来 ， 现 在 设 0-R 不 等 式 的 等 号 对 一 切 9E8 成 立 ， 刚 
(2.2.1 人 对 一 切 9E 晶 成立， 记 | 
N= {lw, OD:Ss, DFaD Gs) — gD)). 


16. 


我 们 来 证 明 入 扎 络 sxX 吕 。, 此 处 多 为 昌 的 一 切 Borel 子 集 构成 
的 v- 域 ， 为 此 , 注意 了 lw 站 对 8 连续 (正则 条 件 加 ,因而 
S (%, Ds 人， 全 


= lim 
Hon rs 


而 每 个 Su(z,， 乃 显然 都 是 可 测 ， 故 知 S(w, 从 为 22sx 
饮 。 可 测 ， 现 任 取 凡 冯 b 至 9(91) gC9)， 由 2.2.11), 有 
BLS (FX, W100) Lo 0) ~g(0)], $=1, 2 


[E 尖 各) ne (7: 


天 此 
(0) = [Bo,(S (X, 6)) 

| CE W/O ~g(0)]. 
由 Se, 四 为 轩 xex 瞩 可 测 知 可 ,(S(Z， 人) 为 多 o- 可 测 , 帮 <) 
也 为 罗 s- 可 测 ， 这样 一 来 ，S(z 信和 a(9) [8 人 一 g(9)] 省 为 
多 wx 二 可 测 , 故 六 E Gex 多 。 又 车 记 及 一 人 :Go 9) EN}, 则 
出外 .2.11) 知 , JNe) 一 0 对 任何 9E9, 因而 (ex Z) (N) 一 
此 处 五 为 到 ;上 的 Lebesgne 测度 ， 再 由 Fabini 定理 知道 ， 存 在 
Ee, LEK) =0, 致 

(NW) -0 当 cER， 此 处 Ne 一 {0: (w, 9) EN}. 
因此 

S08S Se -0 [Glo) ~g C0)], oE EK, OE N:. 


(2.2.12) 
取 EEK， tsEK, E Fg (2), 有 
«0 [218f (9 .~ olog fp2. 0 | /ge 
-9(%2)], OE NUN™®. 
由 正则 条 件 5 上 式 右边 作为 9 的 函数 ， 在 @ 的 任意 有 界 闭 区 了 
内 为 工 可 积 , 故 4(9) 亦 然 ， 任 取 60666, 定义 
Blw) -fo bo), log 0.(0) = { ali)g Ceo du, 


$0) ~| ao)d6. 
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则 将 避 .23,12) 两 边 薪 以 吧 ， 再 在 [po 站 内 积分 ,得 
logf/(x,0)=logh(z)+logC(O) + y(tr) 全 K,9 和 日 
因而 届 .2. 伪 成立， 定理 证 毕 . 

由 本 定理 可 知 ,在 适合 前 述 正 则 条 性 的 前 提 下 , 在 指数 分 布 族 
以 外 ，O-R 下 界 决 不 能 处 处 达到 ， 但 我 们 已 见 到 过 ， 即 使 不 是 指 
数 族 ，MVU 了 也 有 可 能 存在 .这 说 明 , 0-R 下 界 一 般 来 说 和 失 之 过 
低 . 

但 即使 在 指数 族 中 , 是 否 每 个 g 人 国都 有 无 俩 估计 处 处 达到 
OU-R 下界 呢 ? 也 不 尽 然 ， 下 面 的 定理 指出 .即使 在 指数 族 中 ,能 
达到 O- 了 及 下 界 的 情 阅 也 是 塞 若 晨星 . 

定理 2.2.3. 设 碟 的 分 布 为 指数 族 


fw Hap=0 (erg ly), GEO,. (2.2:18) 
则 当 且 仅 当 存在 常数 % 5 至 
gO = EolaT (AX) +0], OE (3.2.14) 


时 , 才 存 在 Y (全 的 一 个 无 偏 估 计 , 其 方差 处 处 达到 OF-R 下 界 . 

证 - 充分 性 很 容易 ， 若 y( 人 有 (3.2.14) 的 形式 ， 则 8(ey 一 
aT(w) 十 5 为 9( 四 之 一 元 偏 居 计 , 其 方差 处 处 达到 OQ-R 下 界 。 事 
实 上 ,去掉 6=0 的 显而易见 的 情况 , 可 将 (2.3.13) 写 为 

Jo 0) =0 (Oo oro, pCO) 一 二 

因而 由 定理 2.3.2 得 出 所 要 的 结论 。 也 不 难 直接 计算 5 五) 的 方 
差 和 0- 及 下 界 以 证 明 其 相等 。 这 一 简单 计算 留 给 读者 作为 一 个 
练习 . 

反 过 来 , 若 g() 定 义 在 上, 且 存 在 其 一 无 偏 估 计 5 了 (@), 其 
廊 差 处 处 达到 C-R 下 界 、 不 妨 设 y() 在 日 上 不 便 等 于 常数 ， 因 
著 不 然 ， 则 将 有 g( 抱 = 如 [0: 人 (XY) 十 加。 利用 愉 .2.1D 并 注 帝 


So 凡 - 号 沈 +2 四 ,得 


G+T 0 -0 [G0) —g(0)1. 
因为 a( 四 天 0 见 定理 2.2.2 的 证 明 ), 上 式 可 写 为 


自卫 Te 


8 = 从 下 加 十 8 全， 对 ra.ePD，6EeB， 
由 于 (2) 与 8 无 关 ， 由 此 显然 推出 a(9)， B89) 都 与 9 无 关 , 分 别 
记 之 为 6 5 得 92) = aT(@) 二 5, 从 面 g( 的 = BB[ 史 (X)] = 
aBo 人 PP ( 工 )) 二 5 对 任何 EB， 定理 证 毕 ， 

从 这 定理 看 出 ， 若 了 1，…， 于。 为 iid. 样本， 王 : 玉 六 吉 1)， 
则 只 有 在 9 人 (的 =a8+5(a, 5 为 常数 ) 时 , 才 存 在 其 一 无 从 估计 ， 方 
差 达 到 C-BR 下 界 (这 估计 就 是 ge 筷 十 念 ， 因 此 , 虽 则 在 例 2.1.5 中 
我 们 证 明了 : 对 8 的 任何 多 项 式 8( 人 ;其 MYUE 都 存在 , 但 当 这 
多 项 式 的 次 数 高 于 工时 , 其 MVUE 的 方差 达 不 到 C-R 下 界 . 


{三 ) 单 参数 情况 下 的 呈 bhattacharya 不 等 式 


前 已 指 出 ，G- 了 及 下界 失 之 过 低 , 以 臻 通常 连 MVUE 估计 的 方 
差 也 达 不 到 ， Bhattacharya 推广 了 D-R 不 等 式 ， 得 到 一 系列 意 
来 您 大 的 下 界 ， 

定理 22.2. 和 . 设 ( 名 各), {Po, OEB}, jp 及 KD), Flr, 从 
的 意义 与 定理 2.2.1 一样 .假定 

主 _ 即 前 面 的 正则 条 件 1， 

2. 即 前 面 的 正则 条 件 2 


3. | (LE dp) =o, él1, GE 


< ye 了 (2) dW <0, 


il, ., EK, 9€0,. 
设 (0) 为 g(6) 的 无 偏 估计 ,其 方差 有 限 , 且 
5. [80% (0% 及) 温床 97 OW dul) 
op, $=1, ., E, 8cE6. 


记 
Of (XK, OD FX, 
Fr) ~ Bae 页 2 -215 人 


6 j=1, -KK 
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VO = Vy) rxr, GEO, 
站 人 一 古国 中国， GEG. 

则 当 在 9E 思 处 了 全 的 行列 式 不 为 0( 注 意 因 (四 为 半 正 定 的 ， 
这 时 必 丰 六) 为 正定 , 因而 其 行列 式 | 亚信 | > 肋 了 时 , 必 有 

Var ( 力 关 人 V1(0) 8 (0). (2.2.15) 
显然 , CO-R 不 等 式 为 名 .2.15) 当 下 一 上 时 的 特例 。， 人 .3.5 称 为 
Bhattaoharya 不 等 式 ， 

证 ， 记 筷 一 广 G 四 一 (S108 从，…， Sx(tw, 办 ) 此 处 


1 fs | ，. 
MAE 仿 一 了 Cg 2 弗 1, 7 EK. 


则 由 条 件 8 知名 ,0S) -0 由 条 件 4 知 "> VARs。 (3) = (四 .再 
由 56, 有 Cove (F(T), 应 必 王 ， 分) 一 90 (的 ， = kK. 由 此 可 


知 
$j Varst) f(D 
4-vam(s)-( FO) VO) ) 
瑞 于 方差 阵 总 是 半 正 定 的 ,有 |44[ 关 090， 但 
| 有 = | FD | [Yare® -FD T0800]. 
再 由 | 下 (由 | >0, 即 得 (3.2.1 四 .证 毕 ， 
对 不 局 的 站 (当然 在 定理 2.2.4 条 件 满足 之 下 )， 人 地 .2.15) 形 
成 一 系列 的 下 界 , 可 以 证 明 , 随 五 的 增加 这 下 界 是 非 降 的 ， 我们 
抬 这 一 不 蕉 证 明 的 事实 作为 一 个 习题 留 给 读者 ， 车 节 的 分 布 为 
指数 族人 (2.2.13), 刚 与 定理 3.2.3 相 似 , 有 如 下 的 结果 : 车 存在 常 
数 go HE ef 关 0 使 
yD = EleotaT (XR) tar lm)], HED 

成 立时 ,对 9 的 存在 无 偏 佑 计 , 其 方 盖 达 到 忆 .2.15) 中 当天 = 并 
时 的 界 ， 叉车 Oovef (ET ( 吾 )，…， 了 至) 天 0 对 一 切 8E8， 则 
没有 一 个 无 凡 居 计 ， 其 方差 能 处 处 达到 2.2.165) 中 当下 = 玉 Eo 一 1 
时 的 界 . 因此 不 难 举 出 这 样 的 例子 , 其 中 对 任何 攻 , 由 (2.2.15) 
所 定 的 下 界 都 不 能 达到 . 

1) 设 节 一 (4,…， 王 W5 都 是 一 维 变量 , YR(X) 称 为 开 的 方差 阵 , 其 全 , 力 
元 为 Cov (Zt 卫 力 。 


» 1i9。 


(四 ) Fisher 信息 函数 


设 ( 芝 ， Sa) ， {P,, EHD}, ~-.， fe, 分 的 意义 者 与 (一) 中 ~ 
样 ， 假 定 ( 一 )} 中 的 正则 条 件 1~4 满足 , 由 C0-R 不 等 式 知 , 8 的 任 
意 无 储 估 计 6( 四 ， 只 要 渍 足 条 件 6， 必 有 


Var[6CED]>| E [Caeszex 2 ] 
由 此 可 知 , 荐 记 | 
1(0) = Bl( S87 DY ], (2.2.16) 


则 当 (四 愈 大 时 , Vars( 信 可 能 达到 的 下 界 也 愈 低 , 即 8 可 能 估计 
得 愈 准确 , 因而 也 就 可 以 解释 为 , 样本 < 中 包含 的 关于 8 的 “信息 ” 
:也 愈 多 Fisher 把 (2.2.16) 定 义 的 了 工 (的 称 为 < 信息 函数 ”考虑 
到 下 界 了 -+《@) 一般 是 达 不 到 的 ,上面 的 解释 并 非 完美 ， 但 是 ， 量 
7 (四 在 虚 估 计 的 大 样本 理论 中 有 重要 作用 ， 这 就 足以 构成 对 它 如 
以 一 党 重 铝 的 理由 ， 

下 面 我 们 证 明了 (9) 的 几 个 性 质 ， 这 些 性 质 说 明 ; 由 (2.2.16) 
定义 的 工 (的 ， 具 有 我 们 对 “信息 量 * 这 个 名 词 的 直观 理解 的 那些 特 
点 ， 

a， 了 人 { 色 与 凤 无 次. 

这 条 性 质 的 意义 是 ， 宙 于 I() 是 通过 f(x, 四 一 dpo(ey /dj 
算出 的 . 如 朵 找 另 一 -个 满足 条 件 {Ps, gg 和 的- 有限 测度 
2 则 了 (vw, 四 将 被 户 (w, 四 二 dPslw) /dav 所 代替 但 (四 之 值 不 
受 影响 . 

证 明 极 容易 , 留 给 读者 作为 一 个 习题. 

b. 沙 干 个 独立 观察 值 所 包含 的 信息 量 , 等 于 各 观察 值 所 包含 
的 信息 量 之 和 ， 下 确切 地 说 ， 设 瑟 ，…， 王 r 独立 ，X, 的 样本 空 
间 为 ( 巡 ， 殉 呈 ， 分 布 放 为 1TP，6E 芭 < 和 An 为 :249 上 的 呈 
有 限 测度 , 瑚 (rs 全 一 gp (we Adj，b=1，…， 下 ， 它 们 都 满 外 
(一 ) 中 的 正 出 条 件 14~ 和 4 倒是 ==( 玉 4 …; 下 ， 则 互 的 样本 空 
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闻 为 ( 秽 ; 绍 2) = (XX 轨 由 Xx 殉 bD)， 分布 族 为 
{Pos, GEB} K=OX XD, 其 中 P= 了 PX Xx 了 PPI, 而 
fa, 仿 一 人 Peto] /dp = fi ln, DD) fr wr, DD， 
网 了 (z, 力也 灌 足 正则 条 件 1~ 各 且 
I(0) = ++Ix(0). @.2.17) 
其 中 了 (四 和 ( 钱 分 别 为 了 和 天 的 信息 函数 . 
证 . fw, 全 满足 正则 条 件 1，2 是 显然 的 、 又 
SE fk, Dfys bess 0) 
x Bley © fos ares, Of ler, OW. 0.2.18) 
由 于 对 了 = 了 1 七 有 
|. 区 全 ap Km) <co， | r Ah 及 19 有 二 so， 
知 | | 羡 各 从 |ap(s) <oo， 将 @.3.19) 左 可 两 边 分 别 乘 以 ii 
和 Qu) GUD (za 并 分 别 对 多 一 2 x…X 吕 内 积分 ， 得 
将 人 .3.17) 两 边 平方 ,分 别 乘 以 


1 
FD 


一 Fe CAC tt 


在 多 一 234x…X27 内 积分 ， 易 厚 所 有 交错 积 项 之 积分 并 为 0. 
由 此 得 出 了 Gs, 外 满足 正则 条 件 4 及 关系 式 (2.2.17). 

o. 对 样本 进行 加 工 的 结果 , 信息 量 不 能 增加 ， 更 确定 地 说 ， 
在 前 面 记号 下 , 设 t(w) 为 一 绕 计 量 , 取 值 于 (7， 允 吃 ,二 的 分 布 族 
记 为 {PY, 9E6), 则 {PY, 86E6B}<<pr, pr 为 上 的 导出 测度 ， 记 
9 由 间 一 dP?G)/dxr， 设 f(z, 信和 9 他 介 都 满足 正则 条 件 
1~ 妨 而 且 
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友 |. fe, Odp—| sO av, 对 性 何 AE 细 4, 
总 | gs 0aur- | 加 芒 全 sur 对 任何 BE 


则 
Tr (0. (2.2.19) 


| 泌 logg (i, Oa PY Ct) 
1 总 gl Odpr (0 =B | Oar 


-各 PI(B)- 放 Pr!(B)) 


J CH) 部 f Ware) — | 2 下. 
因此 出 条 件 期 望 的 定 交 得 
Bs( Bog F(X, 0) I) = log gs, OD. (2.2.20) 
所 以 由 条 件 期 望 性 质 e 及 (2.2.20), 得 
E,l 部 2 药 + ] 
-Ef EB lef(X, WB1og gt, O14]} 
“EB 10g gC, 9) Bo [2 logf(X, 0) 1]} 
-|( 启 log g(t, 扔 )} 
从 而 推出 
Bl(B logf CX, 0) j- Es [5 Ye gt, 分) | 
+Bh[( Slogf (ZX, 纺 一 计 log g(t, 0»)]. (2.2.2D) 


这 证 明了 (2.2.19). 
d. 在 人 性质 。 的 记号 各 条件 下 ， 又 殷 定 fw, 办 和 和 g 坏 凡 都 满 
中 2 


Y. 


是 (一 ) 中 的 正则 条 件 驴 则 他 .2.19) 中 等 号 处 处 成 立 的 充 要 条 御 
为 : 上 是 充分 统计 量 . 

我 们 以 前 曾 指 则 充分 统计 量 是 保存 样本 * 中 全 部 信息 量 前 
统计 量 . 这 个 性 质 从 一 个 定量 的 侧面 印证 了 这 个 概念 , 它 不 仅 有 
助 于 我 们 对 充分 统计 二 这 个 概念 的 理解 ， 也 说 明 ， 将 1 外 称 为 信 
息 量 确 有 一 定 的 根据 . 

证 . 先 证 必要 性 ， 设 fr( 人 人 一 下 (四 对 一 切 0E9, 则 由 
{2.2.21) 拓 I 


部 108f(X, 一 施 1o8 9((X), 0), 
对 ‘ .Pel， 一 茹 J (2 .2.22) 
记 -|@ WD: Blogf ls, D+E logg le), H}, 
则 显 见 NEWax 妇 6, 妇 g 为 or Borel 于 集 所 成 的 o- 域 
由 (2.2.22) 知 (yx 5) (NW) 0， 用 证 明定 理 2.2.2 所 使 用 的 同样 
让, 知 在 在 Sm CD 至 
委 18f (0, = Ig), ), 


对 pa ep 当 mw 巨 五 . (2.2.23) 
mT 2.23) 等 式 两 边 都 是 8 的 连续 函数 (正则 条 件 四 ， 知 
训 logf(w, | = log g(t(%), WD, C— 雪 OEQ, xEEK. 
(2.2.24) 
任 取 00EB, 记 有 天 ( 四 一 g((0)， 00) /flv 90)， 由 (2.2.24) 得 


yo 0) =g Clo), 0) -Fy seEK. 


由 分解 定理 4.5.8, 知 1 沟 充 分 统计 其 . 

为 了 证 明 充 分 性 , 需要 下 面 的 引 理 . 

引 理 2.2.2%. 在 前 面 的 记号 下 ， 车 统计 晤 为 充分 ， 则 大 在 
鹏 一 可 测 的 函数 去 区， 致 


二 33 。 


dP DD /dn — yt, WED. {2.2.25) 
此 处 gt 仿 由 关系 式 f(z, 由 一 gp), 办 和 () 给 出 . 
事实 上 , 必要 时 从 有 中 去 掩 一 切 使 六 9 =0 的 可 设 天 (人 ) 
在 多 上 处 处 大 于 0。 以 关系 ga (DD) 一 BCD)dptz) 定 义 测度 ju 于 
多 x 上 .， 不 难看 出 它 是 o- 有 限 的 ( 轩 吕 为 o- 有 限 ), 且 tr~pt{ 记 
导 ~ 表 示 : 所 pj),， 因而 1 一 好 记 dpT 的/dx7=ED， 则 
对 任何 吾 E 细 zs, 有 


PE(B) = P(e(B) = | 9 Oh de) 


Fl¢ 


| gi), OD dp (0) 一 | Gt, HD an 


ce Wed, 
由 避 E 才 s 的 生意 性 ,证 明了 (2.2.25), 
现在 转 到 充分 性 的 证 明 . 设 i 为 充分 统计 基 , 则 对 每 个 6EB 
存在 WaioE Bw pCNy) 一 0, 致 
fw, 0) —g (im), Dh(s), 4E Ns. 
9 满足 分 解 定理 中 描述 的 条 件 ， 由 引 理 2,2.2, 知 
gC, OD =aPr Ad 全 DED, HENY, wr (ND =0. 
由 Vy 导 分 >0( 正 则 条 件 芍 知 世 全 六 0 当 #E 交 7 改 
89GO， 有 -gl 有 AGOD)， 当 Et) ~ WN. 
因此 当 xENsU Nw 时 ,有 
fm, =), Ohlw) gy), DR) EG). 
再 定义 
N={(%, DF, 的 关 8 作 (二 ， 及 天 (的 人生 人) 
用 在 前 面 几 次 使 用 过 的 论证 方法 , 知 存 在 下 E 绍 sw, p(K) =0, 使 
当 w 世 丘 时 
fv, OD = gs), DN /EY , 对 — 切 EQ. 
两 边 取 对 数 后 再 对 8 求 偏 导数 , 知 (2.2.22) 成 立 , 再 由 (2.3.21) 推 
出 Ix (6) 一 天 (的 对 一 切 9EB， 证 毕 ， 
ss ]9 和 和 


Te 


(五 ) 多 参数 情况 的 CR 不 等 式 


先 引进 一 个 记号 ， 车 方 阵 在 正定 , 则 记 为 4>0. 若 4 半 正 
定 ， 则 记 为 生 z0， 沙 两 方 阵 4 县 之 差 4-B 为 正定 或 半 正 定 ， 
则 记 为 和 > 旦 或 A4> 台 . 
设 六 一 (的,…， gr (站) gr 的 都 是 定义 在 全 上 的 有 限 
实 沙 数 ， 义 设计 (2), 负 人 加 ， 都 是 六 (的 的 无 二 估计 ， 怎 样 来 比较 
9 ( 仿 的 这 两 个 无 偏 情 计 呢 ?当然 可 以 分 出 出 较 每 一 个 的 方差 , 即 当 
Vars (0) < Vare (gn), $=1, .…, 志 (2.2.26) 
时 , 称 戎 = (D7 优 于 = (于 … 约 * 但 这 个 比较 忽略 
了 各 分 量 之 闻 可 能 有 的 相关 关系 一 个 更 为 全 面 的 比较 是 ; 当 
VAR DY) SVAR, Oy') (2.2.27) 
时 , 称 站 优 于 g*， 显 然 , 由 2.2.27) 可 推出 外 .2.26)， 更 进一步 ， 
有 如 下 的 引 理 ， | 
引 理 8.2.8、(2.3.27) 成 立 的 充 要 条 人 忻 为 ， 对 任何 常数 
Hm， Ux， 有 
Vars(% 三 他 <Var 位 cr 2). - (2,2.28) 
注意 衬 a 负 和 疡 mm 他 都 是 六 wor(0) 的 无 偏 售 计 ， 因此， 当 
(2.2.3 信 成 立时 , 不 仅 估 讨 单个 的 %{ 全 时 ， 访 比 锥 好, 而且, 在 
枯 计 诸 兄 ( 胁 的 尾 一 线性 组 会 时 , 用 诸 % 的 同一 线性 组 合 , 比 用 诸 
台 的 同一 线性 组 合 好 ， 
为 了 证 明 引 理 , 记 @ = (&y;…, qxw)'， 则 
Vare(oa'D) < Var(m'g*) 对 性 何 5g 苇 
UVARDDaSoaVARBe(9Y6 对 任何 《全 
VARe (OD) <VARe lg"), 证 毕 . 
因此 , 我 们 对 以 下 两 件 事 有 兴趣 ; 
于 ,寻找 8( 的 的 无 偏 佑 计 中 , 其 VAR 最 小 者 . 
2. 寻找 8 的 一 切 无 偏 估 计 中 , 其 YAR 可 能 的 下 界 . 
我 们 先 讨论 问题 3、 设 ( 受 ， 罗 由，1Po， 9E8}, pb, fw 四 


二 135 = 


的 意义 同 前 ， 根 定 

1* 日 为 Bi 的 非 空 开 集 . 

2 了 (oo 四 之 0 对 一 切 2 忆 当 和 OED, 记 9 二 (01, 3 Pr), 
眼 定 入- 信 对 一 切 oE3 86 日 和 4 一 1 …, 天 都 存在 ， 


3 | 和光 全 人 -0 和 二 …, 下 ,任意 06 


本 I Bf wm, 肋 全 动 
+ | dw) 痊 在 有 限 ， 对 一 切 
9E9 及 bj-l…, 区 ， 
5* 记 了 (6) = (Ig(0))rxx， 其 中 了 (0 为 各 申 之 积分 ， 则 
I(0) >0 对 任何 9Ee. 
定理 2.2 5、 假定 正则 条 件 4*~ 名 成立 ， 设 9(9) - (yi 人 O)， 
yg PAPE 此 处 7 志 率 每 个 gi( 四 为 定 尽 于 四 上 的 实 昌 数 ， 
2 多 存在 ,对 任何 OE 日 及 各 jb 和 记忆 的 -人 vig/ 
a0D) rr 人 r 行列 算 降 )， 设 台 ( 罗 一 (多 ( 的 ，-…， 多 (的 )" 为 9(0) 
的 无 偏 估计 ，Vars(BD <oo 对 任 们 9E 日 及 im~1，…, 7, 而 且 江 
足 
0°| ho dn) = BH | bo, Wane) 
-2 (eder, 1&jEh EO. 
| . 
VABR (D> DO I OD' 0. (2 .2.29) 
证 . 记 
(w, WE 0 .. fw, WY | 
Sw -0 


则 由 条 件 3 知 (SS(X, 90)) ~0. 由 仇 知 VARoCS) (9) >0, 
y SX), FR, DN B00 所 
叉 由 个 知 Cova( 冯 (下 )， 多 每 ~ 加 9 所 以 


全 VAReD) 了 (人 
ovam(®)-( ED DO)_p 2m0 


+ 126， 


既然 召 >0,， 它 可 表 为 A 年 的 形状 , 在 为 r + 阶 方 阵 , 将 其 分 块 为 
对 一 (i 硒 ) .及 1 是 (x + 让) Xr 短 阵 ,有 . 
VARAG) DO ddd 
( 万 (9 TO) ) (24 4 .32.57) 
因此 (2.2.81) 两 边 各 对 应 堪 相 等 , 得 到 
VARs (0) — DD TO) DT OO) 
= 由 (了 一 如 (4240 -14 A 0. (2 .3.3 全 
此 处 无 为 阶 单 位 阵 , 又 注意 坊 4s 一 TC6), 故 由 节 知 C4542) 
存在 、(.2.33) 之 成 立 是 因为 六 
至 = 天 一 (4 和 
为 对 称 攻 等 阵 ( 即 户 = 了 下), 由 矩阵 论 知 , 这 样 的 奸 阵 是 半 正 定 的 . 
定理 证 毕 . 

下 面 指出 本 定理 的 一 个 有 趣 的 推论 。 我 们 知道 ， 如 果 有 4= 
(rxr 产 0 而 G4 一 0 对 某 个 加 a 二 0 对 了 二 4 …*, rr 现 将 
(3.2.29) 左右 南边 之 差 记 为 4, 则 4z>0， 我 们 设 ” = 2, 并 设 
入 (全 的 无 篇 估计 页 (全 达到 了 人 .3.2 右边 所 定 葛 干 限 ， 这 时 
wa 一 0 根据 上 上述 , 有 ma 一 0， 即 名， 扩 的 协 方 莽 Cov (名 ，g) 等 于 
(2.2.29) 右边 的 (1, 人 元， 而 后 者 与 四 无 关 ， 因 此 ,对 如 上 任意 
两 个 函数 总 (四 和 (的 , 车 负 (人 0 ,名 (@) 分 别 为 其 无 访 估 计 ， 而 
Vare (89) 达到 定理 2.2.5 所 定 的 下 限 , 则 杀 和 秽 的 协 方差 与 力 
无 美 ，。 换 名 话说 ,不论 用 什么 方法 得 到 ga( 分 的 一 无 偏 估 计 各, 它 
与 记 的 协 方差 总 等 于 一 个 定数 ， 当 然 ， 这 是 在 适合 定理 2.2.5 的 
估计 的 范围 内 来 谈 的 。 在 指数 族 的 情况 , 根据 定理 1.2.1, 不仅 王 
则 条 件 1 一 5" 全 满足 , 且 尾 何 无 偏 售 计 必 满足 人、 这 时 当然 就 不 
存在 所 述 限制 。 下面 的 钢 子 属于 这 种 情况 . . 

例 2.2.3， 设 下 1,，…， 革 ,为 iid. 样本 ， KI~ Ng, oD), 0= 

0， 令 开 入 =a, (的 一品 ， 则 不 难 算出 
1 90 ?As 0 
D0 -(o 1 7) -( 0 2) 


由 8.2.29) 得 ; g( 四 ,go 四 的 尾 何 无 偏 和 估计 训 ， 5 满足 


i 


on 0 en < 
有 有 | 六 > 人 .2.33) 
v 4 a 0 2at/nf 


权 KX) = XY) 一 


注意 到 ~ 入 (a CI/ , ~ 避 1 且 册 , 名 独立 ,不 蕉 算出 


. 1 On 0 
te 0 20%/(n—1) ) 


国 而 记 达到 了 人 .2.33) 规定 前 下 上限, 但 名 没有。 由 于 态 为 多 ( 的 
的 MYUKE( 例 2.1. 介 ，(23.2.33) 中 关于 o? 的 无 仿 估计 方差 的 下 
限 不 可 能 达到 . 

根据 前 述 推 论 , 具 要 开 是 之 一 无 仿生 计 , 则 Cove( 信 ,92) 
等 于 一 定数 ， 但 我 们 已 扼 当 各 = 总 了 时 Qovs( 于 , 59) = 由 此 可 
知 : 蛙 与 ge? 的 性 一 无 偏 傅 计 距 的 相关 系数 为 0， 这 一 事实 也 不 
蕉 直接 证 基 . 

下 面 的 定理 在 五 =? 的 情况 给 出 届 .2.2D 中 的 等 号 成 立 的 条 
忻 (注意 当下 ~7 时 ,已 全 为 方 阵 }. 

定理 .2.6. 设 定理 2.2.5 的 条 件 成 立 , 是 牙 =r+， 则 车 对 基 
个 甸 志 合 用 1 如 (Bo0) | 下 9 时 , 以 下 三 论断 特价 

a) (2.3.29) 中 的 等 号 在 名 处 成 立 . 

by IVARs.O) |= [D0 (TY) |. 

0o) 存在 非 异 方 阵 瑟 (00), 膏 

#2) -BONSG, 名) 十 Bo 对 wla.0.Po) 成立, 

证 . 先 明 确 凡 个 的 预 苗 事实 : 设 及 ,电光 两 方 隆 , 夸 宕 电 和 0 
则 由 | 及 [=| 如 | 可 推出 有 4= 吾 事实 上 , 因 雪 4, 如 都 正定 ， 存在 韭 
异 方 阵 上 @， 致 

A-QdiagH, , MW, B=-Qdiagtn, -, pH)@', 
由 驴 汪 吓 ， 知 入 这 jm 一 I …，7?。 由 于 加， 都 大 于 0 显然 只 
9 此 处 及 以 后 我 们 用 diag (6, …， ow) 记 一 个 防 对 角 方 隆 ， 其 主 对 角 线 上 的 元 
素 依次 为 四 mu。 
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在 和 一 po 划一 1，…, "时 才 有 | 有 1 一 1B|, 而 省 各 一 Po $= 一 4, ,+ 
时 有 盘 ~ 吾 . 
让 这 个 预备 事实 ， 注 意 到 当 |] 了 (1#0. To >>0 对 有 
总 (000 有 Do >>0 立即 得 到 3) 合 中. 现 设 中 成 立 , 则 出 
VARe (S(T, 0)) 一 二 (go 知 
VARBR, CD = BOV TO) 在" (go)， 
且 显 然 有 上 (6) 一 如 (60)IT(B0)， 因 而 
VARo (DD = DO TT- (00 Dr do), 
这 证 有 明了 的 之 a). 
反 过 来 , 设 引 成 立 ,在 已 .3.31) 的 记号 下 ,将 有 
一 
即 A a EE 
注意 到 荆 一 万, 起 4 了 态 的 固 等 伯 , 由 上 式 可 得 
[大 As A A -1A A 0. 
加 看 一 有 BB 
AsB7(60). 必 有 | 如 (Go) | 天 0, 因为 由 人 .2.3D 及 四 有 
0< DE YO | SIVAR,.) | 
[dA | 一 |B eo | IAA,1. 
从 而 
VARs [G(X) - BOO) SR, Oo] 
= A +B (fo) .44 一 4: 盏 > 《9o) 
— ByAdA = BO) 人) 
+B(00) ALAsB' (00)- B(00) ALAsB"( Oo) 
— B00) AsAsB'™ (Hh )= 0. 
由 此 推出 , 存 宪 常 向 (6,)， 数 
FF) -BONSE, to) = albo), (a.e0.Po). 
丙 边 求 Bo 注意 到 Bo (CR)) 一 和 (go 和 Bs, LSC，00)] 一 0, 知 
Gtgo) =8(9o ,这 证 明了 名 成 立 , 即 a) 坊 6)。 定 理 证 些 . 
设 下 的 分 布 为 指数 族 


= 了 39 * 


dP, (zy — Coxp(> bm Ys), IE0. 
(2.2.84) 
6 为 Rx 中 的 一 非 空 开 集 ， 又 设 人 1(X)，…, TtX) 线 性 无 关 ， 
山下 存在 不 同时 为 0 的 常数 so， 四 ，…，5r, 至 


,2.85) 
(显然 ,只 渍 对 一 个 8EEX2.2.35) 不 成 普 , 风 对 一 切 0 了 E92.3.85) 
不 成 立 )， 

系 虽 .2.1， 当 及 的 分 布 族 为 (2.2.3 四 用 人 ，-…，2x 满足 上 
述 假定 , 记 g(9) 二 (gi (的 ，…， gx (的 )"， 具 中 
0D arBlTHX)), jt, KR. (2.2.36) 


这 里 态 = (ag) rx 为 非 异 方 阵 ; 则 各 (四 的 光 偏 估计 妆 (x) 一 i917)， 
C0))' 的 方差 阵 下 ABel(&) 达 到 (2.2.29) 所 规定 的 下 界 ， 这 
里 

六 -站 or 有 四， 1) 
且 只 有 形 期 但.2.36) 的 久 ( 信 及 其 形 如 人 .3.3 的 无 催 和 估计 , 才能 
达到 名 .2.29) 贰 证 的 下 内. 

证 明 直 接 从 定型 3.2.6 的 四 得 出 注意 色 ，…, Yr 钱 竹 苑 
美的 条 件 在 于 保证 17 | 关 0.， 又 ， 若 用 $1.2 结尾 处 所 指出 的 
Ti) 下 Covo (TAXD, Ty( 卫 的 公式 ， 很 容易 通过 定 接 计 
算 证 册 (2.3.29)， 我 们 把 这 个 计算 作为 可 题 角 给 读者 . 

关于 前 面 提出 的 问题 二 有 如 下 的 结果 

定理 2.2.7， 在 前 而 的 记 导 下 ， 设 1 为 68 的 一 完全 充分 统计 
晤 ,BO 一 人 入 四 入 为 待 估 函数 、 则 车 存在 9 (的 之 一 
无 人 篇 倘 计 60) 二 (9 人 0 0)"'， 玫 Varsfg 之 co 对 任何 
8E8 及 = I，*…, ?7， 则 存在 (外 的 唯一 的 光 沪 估计， 它 能 下 
为 雪 扩 的 国 获 下 址 (的 ) 一 (和 ()，…， 鹿 申 (0))", 梧 对 (的 
的 任何 无 偏 舍 计 镶 人 0) = 《gi(2)，…, .六 (2))", 只 要 满足 条 性 
Varetgf (过 oc0 对 名 一 1，…', 和 一 切 8 包 介 ,就 有 
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VARAo YY VARe ARGCRNN), —H EB. (2.2.38) 
证 . 记 BD = BGRIID, $= 1 -TY 
Ch 引证， DT， 则 下 性 CD 为 9( 风 之 无 仿生 计 , 因 
此 对 人 酝 何 在 = (6) 和 9" (6) 都 是 4'g {四 的 无 
仙人 锁 计 。 出 定理 2.1.1, 知 Vare(ohRGA))) Vare(ag"()), 
等 导 当 且 榴 当 gr(2) 为 1(w) 的 函数 时 才 成 立 , 即 
a VARAROGOCAI Naa VAR gr) dg. 
对 枉 何 4， 这 证 组 了 了 (2.2.88)， 由 于 等 导 只 在 y" 为 天) 的 函数 时 
才 成 立 , 旦 由 二 的 完全 性 知 ， 基 于 taz) 的 无 侧 估 计 只 和 一 售 ， 故 定 
理 得 证 . 


(入) 多 参数 情况 下 的 Fisher 信息 矩阵 


与 单 参数 情况 一 样 ， 在 前 面 提出 的 正则 条 件 ?~ 人 之 下 , 拒 
在 条 件 也 中 定义 的 矩阵 (内 称 为 信息 矩阵。 这 个 定义 的 很 据 、 
解释 及 了 (的 的 基本 性 质 , 与 单 参数 情况 没有 任何 本 质 区 别 ， 因 此， 
我 们 不 再 点 一 重复 所 有 细节 了 . 


§2.3. Bayes 估计 和 Minimax 和 估计 

(一 ) 通 论 

本 节 所 论 的 问题 涉及 到 红 计 学 中 一 个 有 影响 的 学 派对 统计 间 
题 的 看 法 , 其 基本 看 点 可 以 通过 本 章 亡 论 的 点 估计 阅 题 解释 清楚 . 

到 此 为 止 我 仍 所 持 的 观点 是 :被 估计 的 参数 0 只 知道 在 台 
肉 ， 除 此 之 外 一 无 所 知 ， Bayea 学 派 的 观点 是 ， 在 具 笨 进行 观测 
《以 得 到 样本 邮 之 前 ， 扩 们 对 吾 根 据 进 去 的 经 验 积累 了 一 些 知识 . 
用 数学 形式 把 这 种 知识 整理 起 来 ,就 可 以 提出 这 样 一 个 模式 ; 虽然 
6 的 基体 什 未 知 ， 但 它 服 从 全 上 的 一 概率 分 布 纶 (9)， 这 个 分 布 
帅 做 的 “ 先 验 分 布 "” 举 一 个 例子 也 许 有 助 于 理解 这 个 概念 ， 设 
茶 三 每 月 进行 一 次 手 祥 被 查 以 估计 当日 产品 的 让 品 率 8。， 就 被 估 
计 的 那 批 产品 而 言 , ! 当然 上 只是 一 圈定 的 未 知 数 ， 并 无 孟 机 性 可 


=: 8] = 


en 


址 


， 但 逐日 的 瞩 饥 率 包 少 有 些 波 动 ， 从 长 期 看 ,就 可 以 把 “一 日 的 
族 品 率 ” 视 作为 一 个 随机 变量 久 而 我 们 杰 千 计 的 荣 特定 日 的 站 品 
案 , 别 是 这 个 随 视 变 陨 台 的 一 个 抽样 值 ， 册 过 去 长 期 答 查 痢 经 验 ， 
我 们 对 日 的 情况 积累 了 一 些 知识 , 比方 说 ，9 有 生 范 的 可 能 件 不 
超过 0.05 之 类 ， 在 本 例 中 , 把 6 视 作 随机 变量 及 认为 它 有 一 定 的 
先 验 分 布 , 是 合理 卫 站 然 的 ， 这 个 知识 也 很 有 助 于 我 们 对 诬 蝇 率 
作出 更 切合 实际 的 估计 , 因为 , 唱 则 我 们 合计 的 对 象 是 " 某 日 ”的 庆 
品 率 , 但 从 上 而 的 讨论 看 , 我 们 不 好 把 这 看 作 一 件 弧 立 的 事情 , 而 
应 把 它 放 在 “成品 率 逐 日 不 断 变化 "这 个 背景 下 去 考察 。 因此 , 适 
当地 参考 其 毛 史 而 不 把 估计 完全 基于 这 一 月 的 观察 ， 显 然 症 十 分 
重要 的 ， 例 如 ， 从 所 史记 录 看 ,该 广 在 过 去 一 段 废品 率 一 直 较 低 ， 
那么 , 旺 则 在 今天 抽样 时 表现 引 较 高 的 庆 品 率 , 结合 历史 看 , 我 们 
倾向 于 认为 该 且 的 情况 不 完全 反映 全 面 ， 而 把 谨 品 率 的 估计 通 当 
往 低 的 方向 拉 一 些 . 

Bayes 学 派 把 类 似 于 上 述 例子 的 情况 引伸, 而 交 出 一 个 观点 ， 
就 是 在 讨论 一 个 统计 问题 时 ， 必 须 考虑 4 的 先 验 分 布 ， 这 要 成 为 
问题 提 法 的 有 机 构成 部 分 。 在 Bayes 学 派 看 来 ,获得 样本 “的 上 
的 大 对 昌 的 先 验 知识 (反映 在 其 先 验 分 布 路 (的 中 ) 进行 漳 怠 ， 从 
数学 上 说 就 是 ; 在 获得 样本 z 后 ,可 以 标 出 9 在 给 定 六 一 z 时 的 条 
件 分 布 了 (4912)， 面 这 个 条 件 分 布 就 区 映 了 人 们 对 8 的 情况 的 
新 了 解 ， 尔 后 的 任何 推断 都 以 此 为 出 发 点 。 因 之 , 就 Bayes 学 派 
而 言 , 样本 2 的 净 效 果 是 把 对 6 的 了 解 由 QE (0) 调整 为 HCA912). 

著名 的 所 谓 " 逆 概率 问题 "有 助 于 说 明 这 一 点 。 我 们 知道 ， 若 
一 事件 么 的 概率 为 避风 独立 试验 W 次 时 ，4 出 现 的 次 数 下 的 
分 布 可 出 二 项 分 布 代表 ， 现 在 反 过 来 , 设 已 知 在 次 试验 中 事件 
4 出现 耻 次 , 间 对 9 可 以 说 些 什么 ? 从 通常 的 观点 , 我 们 就 用 分 
来 估计 6。 但 从 Bayes 学 派 看 ，9 并 菲 没 有 可 能 取 其 它 值 。 他 们 
推理 如 下 ， 认 定 在 试验 前 关于 9 的 知识 已 总 结 在 先 验 分 布 心 (9) 
中 , 例如 , 可 根据 同等 无 知 《 equal 论 noranee 的 原则 , 指定 8 


+1 


的 先 验 分 布 为 五 (0, 1)， 运 时 , 车 试 验 结果 为 全 = 对 , 不 难得 出 好 


x | 
HGOX=M = HD OM, Obl, 
“\A 


(2.3.1) 
办 此 ， 得 出 训 = 王 后 ， 原 先 我 们 对 局 的 了 解 其 亡 在 人 0, 力 任何 地 
厅 有 有 同等 订 能 ， 珊 在 认为 它 仍 可 取 00, 畏 内 存 何 值 ， 但 按 (2.,3.1D) 
分 布 ， 出 (3.3 .了 D 不 难 算 出 它 在 8= 肛 .NN 时 达 仙人, 所， 由 所 
得 试验 结果 ,现在 6 在 (0, 已 各 处 并 非 同等 可 能 ， 而 是 在 六 的 附 


近 的 可 能 性 较 大 . 

非 Bayes 学 派 的 人 对 上 述 论 点 提出 的 反对 意见 主要 在 于 ， 首 
先 , 在 许多 情况 下 将 9 视 作为 随机 变量 是 不 人 台 理 和 的. 例如, 估计 某 
矿 体 内 一 种 金属 的 售 量 ， 很 难 把 这 一 问题 纳入 Bayes 观点 的 模式 
中 。 其 次 , 就算 在 某 些 问 题 中 将 8 看 作 随 机 变量 有 一 定 的 合理 性 ， 
但 关于 号 的 先 验 知识 ， 往 往 不 是 确切 到 可 以 提出 一 定 的 先 验 分 布 
来 .在 宇 种 情 议 干 , 指定 一 种 先 验 分 布 不 免 带 有 人 为 性 , 而 这 未 必 
助 于 向 题 的 合理 解决 ， 无 疑 这 也 是 不 容 忽 袖 的 论点 . 

但 是 ， 非 Bayes 学 派 的 人 即使 对 Bayes 学 派 的 基本 观点 持 有 
疑问 ,但 并 不 拒绝 采用 Bayos 学 小 的 方法 来 处 理 一 些 统计 阿 题 , 因 
为 , 用 这 种 方法 所 找 出 的 一 些 问题 的 解 , 从 其 它 的 标准 看 也 有 优越 
性 ， 下 节 在 讨论 Minimax 全 计时 , 我 们 会 看 到 ，Bayes 方法 可 作 
为 寻求 Minimax 估计 的 工具 .总 之 , 非 Bayes 学 派 的 统计 学 家 在 
使 用 Bayes 方法 时 , 是 将 其 作为 一 种 工具 来 用 , 而 把 有 关 这 种 方法 
的 哲学 问题 先 搁 在 一 边 . 

至 也 本 书 作 者 ， 一 方面 认为 在 处 理 一 个 实用 的 统计 问题 时 ， 
Bayes 方法 是 否 适 合 ， 要 根据 这 问题 的 具体 情况 来 分 析 ， 例如 在 
本 有 段 开 始 处 提 到 的 那个 废品 宰 估 计 癌 题 , 未尝 不 可 用 Bayes 方法 . 
另 一 方面 , 在 理论 问题 中 ，Bayes 方法 作为 一 种 有 力 的 工具 自然 是 
不容 忽视 的 ， 
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《二 ) 问题 提 法 和 基本 概念 


本 段 的 目的 是 用 精确 的 数学 语言 来 描述 (一 ) 中 的 思 型 ， 这 里 
涉及 一 些 有 关 可 测 性 的 问题 ， 为 了 不 使 在 一 开头 就 聊 入 细节 ,我 
们 把 这 些 问题 留 到 本 节 第 (五 ) 段 去 处 理 . 

变量 五 的 样本 空间 为 (2 绿 。)， 分 布 族 为 {Po:9E8}, 日 为 
参数 空间 ， 在 此 必须 在 中 引进 一 个 0- 域 妇 。, 因而 (8， 妇 ) 构 
成 一 个 可 测 空 间 ， 判 决 空间 (多, Bz) 和 判决 菠 数 8 的 意义 与 以 前 
一 样 , 在 点 估计 问题 中 , (多 ,多 。) 为 欧 氏 的 而 6 称 为 估计 量 ， 又 给 
了 一 定 的 损失 函数 了 (6, 四 和 待 估 函 数 yg(9). 

定义 2.3.1、(@, 细 ) 上 的 任 -概率 分 布 云 称 为 8 的 一 个 先 
验 分 布 ， 一 切 先 验 分 布 的 全 体 用 。 来 记 . 

定义 2.3.2. 设 8 为 任 一 判决 画 数 (在 此 为 估计 量 )， 以 
召 (O 8) 记 其 风险 函数 , 则 称 

RB) = f ae， a) dé (0) (2.8.2) 
为 8 在 先 验 分 布 之 下 的 Bayes 风险 . 

显然 ，Bayes 风险 反映 了 在 大 量 次 数 使 用 3 时 , 按 8 的 分 布 & 
将 招致 的 平均 风险 . 

定义 &.8.3， 任 一 满足 条 件 

Bi(80) ~inf Ri (8) (2.3.3) 
的 判决 函数 gr 称 为 所 提 统 计 判 决 间 题 的 Bayes 解 (在 先 验 分 布 & 
之 下 )。 在 估计 问题 中 称 Bayes 估计 . 若 记 人) 一 R68;), 则 湾 
足 条 件 
r (to) -snp "6 (‘2.38.4 
的 洁 验 分 布 名称 为 “最 不 利 先 验 分 布 ”. 
记 了 (4) 一 | oC4)aE 06), 5EE，、 显 然 这 是 多。 上 的 一 概率 
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分 布 , 它 称 为 了 的 “绝对 分 布 ”， 其 次 ，(9， 之 ) 的 窟 合 概率 分 市 
为 


P*(O) -| POW (0). (2.3.6) 
这 是 定义 在 多 sx 侈 s 上 的 一 个 绝 率 测度 ， 又 
Oo— {re: (0, 2) EO (2.3.6) 


为 集 C 在 处 的“ 切 HH 
至 于 所 使 用 的 估计 量 ， 当 然 可 以 考虑 或 不 考虑 随机 化 的 ， 在 
(3.3.3) 中 , 若 记 是 对 一 切 (包括 随机 化 的 ) 估计 量 了 到， 则 六 称 为 


随机 化 的 Bayee 估计 。 如 果 只 考虑 非 随机 化 的 ， 则 条 为 非 随机 化 
的 Bayes 估计 . 

以 &(.| 翅 记 在 给 定 卫 =z 时 ,9 的 正则 条 件 概率 分 布 ， 如 假 
定 绕 和 日 都 是 欧 氏 的 ， 则 其 存在 性 由 定理 1.3.1 保证 。 在 一 个 
特定 (也 是 最 重要 的 ) 情 况 下 ,这 个 条 件 分 布 的 形式 可 以 明确 生出， 
即 在 (Ps 9EB) «jb 为 绍 。 上 的 o- 有 限 测度 ) 时 , 车 记 pCo, 0) 
=dPCw) /dn, 则 / : 

SB 人 -| ke Oa€60) /| po AEO), FE Be 

(2.3.7) 

定义 2.3.4、 正 则 条 件 宏 率 分 布 (.1z) 称 为 在 得 到 样本 2 
时 ,8 的 后 验 分 布 。 

使 用 9 的 后 验 分 布 和 于 的 绝对 分 布 ， 并 注意 B.C8) 不 过 是 
了 (9, 8( 斑 )) 在 概率 分 布 P 下 的 均值 , 利用 条 件 期 望 性 质 。 可 得 


BC) -| ap 四 | 5 3)E0 加 、。 @.3.9) 


这 是 为 非 随机 化 的 请 形 。 在 随机 化 的 情况 ， 避 .3.5) 用 下 式 代 
替 ; 
1 文献 中 对 此 无 专 称 ,此 处 权 用 -- 时 ， 这 是 相对 于 在 给 定 0 时 研 的 "条 件 分 布 ” 


Pe 来 说 的 . 有 些 文献 中 将 它 称 为 “ 边 沁 分 布 ”(Marginal distritmtion) ,但 用 在 这 里 似 
不 大 自然 . 
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RG) = {apo cg] 本 | Ze 508 人 oD). 


(2.3.9) 
于 是 有 下 面 的 重要 定义 ， / 
定义 2%.8.5. 表达 式 . 
Rl8, ) 一 | (0，3Ce))$(a91s) (8 非 随机 化 )， ) 
° {2.8.10 
BC8, D ~| (a0) LC0, 05 人 的 全 随 说 化 ) 
称 为 在 绘 定 样本 = 时 8 的 后 验 风险 
显然 ， 
RD) =| RB, adP(， (2.3.1) 
现在 容易 证 明 下 面 的 基本 定理 . 
定理 2.3.I， 设 存在 一 个 非 随机 化 的 判决 函数 5(%)， 满足 条 
件 
Rel8. DD =| Le0, 58)Ed0 由 =ingf Le0, OSI 


(2.8.12) 
则 8 (在 包括 随机 化 列 决 函数 的 关中 ) 为 先 难 分 布 志 之 下 葛 Bayes 
解 . 
证 ， 设 他 为 任 一 随机 化 判决 函数 , 则 对 任何 x 


RB, 0) = { £ a012) |, LC, 1 8°(, di) 
= °C, a | LO, DECd0ls) 
于 ， 全 
>| 8", dt) Re(S, #) = Beld, wo). 
因此 由 人 .3.1UD) 立 得 Ri(8") > Br(3)， 这 证 明了 5 为 Bayos 解 . 
这 个 定理 的 意义 在 于 将 Bayes 解 的 寻求 化 为 …… 个 极 估 问题 
(2.3.12), 而 且 一 般 Bayes 解 为 非 随机 化 的 ， 癌 题 在 于 是 否 对 每 
个 zCG 党 极 值 问题 42.3.1 人 的 解 So 存在， 在 理论 上 上 说， 还 有 
So) 的 可 测 性 问题 .在 具体 场合 下 解 可 直接 求 出 而 不 难 验证 其 可 
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测 性 ， 鲁 子 留 到 下 一 段 讨论 . 

从 判决 函数 理论 的 角度 看 ， Bayes 方法 无 非 蚌 提供 了 一 个 关 
于 判决 函数 优 劣 的 准则 ， 我 们 已 指出 过 ， 风 哈 函 数 RW, 六 在 台 
上 一 至 最 小 的 判决 函数 5 一般 不 存在 。 Bayes 方法 把 这 个 风险 按 
概率 分 布 ( 先 验 分 布 ) 加 以 平均 (得 Bayes 风险 B66))， 而 以 此 
作为 判定 8 优 党 的 标准 


(三 ) 平 方 损失 的 情况 


极 值 间 题 (2.3.12) 的 解 与 具体 的 分 布 族 (Ps, 6€ 的 ， 先 验 分 
布 # 和 损失 函数 五 人 只 有 关 ， 因 此 无 法 提出 一 般 的 公式 ， 但 在 
损失 函数 为 平方 函数 的 情况 , 可 以 讨论 得 更 基体 些 . 

假定 上 段 的 记号 全 部 保持 , 又 假定 , 待 佑 函数 Y( 失 取 值 于 总 ， 
兰 决 空间 多 为 如 或 其 一 区 间 , 而 损失 函数 为 

LO, 国王 和 (的 [的 一 四 = (2.8.18) 
这 里 0<X (人 之 oo 对 任何 9E8. 
引 理 屿 ,3.3，(QGirshiok, Savage)， 尾 给 xE 信 若 存 在 父 
中 两 点 号， ds， 中 天 2， 致 
Kd, © =| LC, ddé (dels) <o0, i1, 2, 
(2.3.14) 
则 对 任何 dE 盆 有 F(d, #2) <o0, 且 
EA I <oo. (2.8.156) 

证 ， 易 见 对 任何 GE [ta de] 有 下 (0 四 天 co. 此 因 和 车 &E& [yg 
cj 则 存在 2 0<0 生 贡 致 8 一 pl 十 但 一 切 帮 因而 仙人 的 一 人? 
DD 一 四 对 一 芭 (人 全 一 后)2 现在 于 (二 ， 好 ) 内 取 四 点 
Qs, sd3， 0 ， 驾 

ds Fa, GF d3 da= ds — dd, dq ad 
则 由 上 述 下 (2, 怠 在 [Gi, Qs] 内 的 有 限 性 , 及 关系 式 
(G3 +2(d —d) (一 9 全 73 
一 (la 一 9 的 ) — (Gag) 
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知 
—co<BIMO (st ot2 0 yD) | 可 天 co 

(2.3.16) 

将 上 式 中 dh, 出 改 为 起 ,起 ， 得 另 一 不 等 式 ， 将 两 式 相 减 , 注意 

ds 二 0 一 局 十 忠 ， 得 

一 ce 所 古人 以 (的 (到 一 的 | 加 <o0, 

故 万 [%(0) | 四 有 限 ， 由 入 (的 守 0, 知 0 一 盏 愉 押 | 加 <co。 此 与 

(2.8.16) 结合 , 知 召 区 (的 8 的 | 加 有 限 。 理 由 . 

— oo<EIO (20 gD + gD) es < 
及 已 证 部 分 ， 知 召 D(8)92(9) |g] 有限 ， 上 既然 吾 以 (0) "(0) | 区 对 
= 0， 1, 3 都 有 限 ， 他, 四 对 尾 何 GE 多 有 限 . 证 毕 . 

由 于 
Eld, m=—@ EO | 22080 090) |2) 
+EBAD FD |w, 
知 当 下 (d, 和 ) 有 限时 , 叭 一 的 极 小 值 在 
ds— EONDIOD ITD/ BND 1D. {2.3.17) 
根据 引 理 2.3.1， 由 定理 2.3.1 立 得 如 下 定理 . 
定理 2.3.8. 在 平方 损失 忆 ,3.13) 之 下 , y( 站 的 Bayos 估计 


沟 
由 4 人 .3.1 六 定义 的 配 ， 若 五 他, 区 过 ce, 对 一 切 邮 
5, Ce) 上 车 仅 对 = 史 有 攻 (4, 0 志 0. 
任意 dE 车 KK(@, 四 一 oo, 对 一 切 纪 
(C2.8.18) 


现在 考虑 一 次 损失 的 情况 ; 
LO, dy NO 1 gO) dA), OA Lo0,. (人 2.3.19) 
需要 如 下 的 引 理 ， 
引 理 2.3.2. 设 耳 为 一 维 变量 节 的 分 布 评 数 ， 则 Br(| 站 一 


加]) 一] le 一 ma (对 mm 的 最 小 值 在 五 的 中 位 数 处 达到 
这 是 初等 概率 论 中 习 知 的 事实 ， 证 明 见 [2], 177 页 . 
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i ps 
4 re mm 


我 们 又 注意 到 ， 引 理 3.38.1 的 结论 在 此 显然 成 立 , 事实 上 , 设 
EDD | gd 之 00, 5 一 1 2， 而 而 关 柬 ， 风 由 | 有 一 下 (的 
< LD 一 而 | 十 1) 一 呈 ] 知 五 太史 二 co 再 出 
BG) gO) C—O gD {| <0， 于 是 对 一 
切 & 有 吾 区 (的 [gC0) dl lo] <o0. 

所 以 ,在 上 述 情况 成 立时 , 问题 归结 为 找 使 

Kild, ®) — EL [gt0) —a| |4] 


-| %C0) ig) -alé (agls) 
达到 最 小 ， 因 为 当 co> | X69)&(a9 1 区 时 ,可 定义 概率 测度 7(412) 
=| ,XC0)é a8 1)/| 2(O)E (a01z), 这 时 


Ka, «=| 19 人 一 eng/ CO)é (E01s), 


以 Ft]g, 2) 记 g( 站 在 8 服从 分 布 n(*1t) 时 的 分 布 请 数 , 由 引 理 
2.3.2 知 , 上 1(d, %) 的 最 小 值 在 一 了 (9, 纺 的 中 位 数 外 达到， 
这 样 ,证 明了 下 而 的 定理 . 

定理 2.8.8， 以 (2.3,19) 为 损失 函数 时 , 9(8) 的 Bayes 升 计 
为 
(了 (|g, 2) 的 中 位 数 ， 
着 Kj(9, 加 之 co， 对 一 切 羽 


6 (0) = 若 公 对 4 一 心 ， 有 Kild, 好 一 oo， (2.3.20) 
任 伍 让 世人 鲜 
著 Ks tq, 二 一 co 对 一 切 a,. 

另 一 个 Bayes 解 存 在 的 情况 是 ， 设 多 一 电 , 6, 由 一 WV(g( 四 ) 
一 四 ， 歼 (四 为 品 于 的 凸 函 数 , 满足 条 件 Him 扩 (%) 二 co， 这 时 易 
见 ; 表达 式 

Ke, 办 = 人 Wg(0) -éla0ls) 
汐 加 的 呈 函 数 , 且 Ti sa， 们 一 oo0， 因此, 或 者 长 ld, 2 =o0 
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对 一 切 @ 或 者 五 st 0 对 台 的 最 小 值 在 有 限 的 4 处 这 到， 如 厂 
为 严 本, 则 达 汉 最 小 的 总 为 唯一 前 ， 然 而 , 在 总 外 情况 下 , 关于 达 
到 最 小 的 没有 简单 公式 可 和 忽 . 

例 2.3.1. 以 前 面 握 到 的 估计 废 蝇 率 吕 为 鲁 , 先 验 分 布 为 
RCO, 蕊 损失 函数 为 卫 全 ,二 = 了 一 四 这 时 Bayss 生计 为 后 
验 分 布 的 均值 , 前 已 指出 ,在 得 到 芝 一 姥 时 ,后 验 密 度 为 (3.3.1)， 


不 难 算出 其 均 从 为 -入 二 寺 ， 这 样 得 到 Bayos 合计 
入 汕 4-1 
gm) TN ‘2.8.21) 
这 估计 的 Bayes 风险 为 
R(t -| EB, [ 十 1 -0] a%. 


B+ 
由 斑 ~ 召 (NW, 站 容易 算出 


BN -0] = CT [NG( -0 + (20— 41). 


从 而 得 到 .RD BN: 


着用 通常 的 估计 车 , 则 Bayes 风险 为 -六 
即使 撤 开 Bayea 方法 的 出 发 点 是 否 合 理 不 谈 ， 佑 计 忆 ,3.21) 
与 通常 估计 下 /NW 比较 , 也 有 某 些 优点 ， 例 如 , 在 三 =0 和 六 时 ， 
由 通常 估计 ,将 用 0 或 1 去 知 计 尹 这 在 很 密 问 题 中 是 不 合理 的 . 
俩 计量 3.3.21) 则 把 对 吕 的 合计 作 了 一 点 调整 ， 因 而 显得 比较 合 
名 些 . 
例 2.3.2， 仍 讨论 上 上 例 ， 但 取 先 验 分 布 为 8- 俘 布 : 日 有 密度 
《 它 称 为 8- 分 布 , 记 为 Bla, 5)). 
了 (ae 十 天 Ar A 1 
TT (I 9 3 0<0 1, > 人 0, 0, 
{2.3.22) 
则 在 得 到 王 一 开 时, 8 的 后 验 密度 为 
FOIE=M) -O01 DI, OO<I, (2.38.25) 
1d» 


ZN 十 & 十 的 


此 处 CE OD 
分 布 (2.3.23) 的 均值 为 有 六 < 因此 
人 + 
Gp) ~ (2.8.24) 


汐 先 验 分 布 久 .3.22) 及 平方 栅 失 8 一 用 ?之 下 , 8 的 Bayes 信和 计 . 
易 见 


Bolbor CR) —0’ ~ N09 oa 


(2.3.2D) 
而 Bayes 风险 为 


Tr 站 二 二 一 _, —1 
| BG 0 SE 0 a 


= = 一- a ob a 
Nat (十 站 (十 下 十 13 


特别 , 当 4~5=~MVN 人 2 时 ,这 .8.2 国 右 边 成 为 一 常数 一 一 一 i 


{2.8.26) 


mg 
4(N FVN)’ 


入 证 vm 
gva2 人 (有) 一 Wi 十 aN RY? (2.8.27) 
BD, fa va 一 


这 个 事实 在 下 节 有 用 . 

要 是 损失 函数 为 工 (6, 只 二 19 一 Q|， 风 因 后 验 分 布 为 2B- 分 布 
(3.3.23)，Hayes 估计 需 查 8- 分 布 表 . 

和 枫 2.3.3， 三 1，…， 芭 ,为 iid, 冬 本 , 1~ 和 WB9, 1), 损 兴 函 
数 为 介 一 只”， 先 验 分 布 为 9~ 信 0， 的 要求 8 的 Bayes 估计 . 

自 于 豆 为 完全 充分 统计 量 , 可 以 只 考虑 基于 它 的 估计 量 ， 记 


了 一 闷 ， 则 六 ~ 太 (9, 二 ), 故 知 (5, 了) 的 联合 密度 为 


YE oxp | - 


交 
到 FT Vi (2.3.28) 


| 
31 2 J 


* 卫生 了 


四 此 给 定 了 =y 时 ,9 的 后 验 分 布 为 W( 王 吓 gs-，- 二 万 ) ,从 而 


工 下 : 
推 知 8 的 Bayes 估计 为 
ny nz 


Br) a Ti {2.3.29) 
共 风 险 沙 数 为 
m2 芝 3 nk 
BO 0) ~ Esl 770) = Lats (2.3.30) 


注意 当 ->oo 时 , 估计 基 遍 (四 和 起 于 通常 的 估计 量 下 ,而 五 (0, 8) 
趋 于 常数 二， 由 (2.3.30) 易 算出 和 的 Bayes 风险 为 


| Re, 加 -二 一 exp( 一 3 /242) 0 = 


< 


i 
(2.3.31) 


当 ->oo 时 ， 它 趋 于 工 ， 


《 玛 ) 广 义 Bayes 估计 


本 有 段 的 目的 是 ， 借 助 于 一 个 问题 补充 某 些 关 于 判决 函数 的 概 
念 , 但 不 深入 其 细节， 因为 问题 的 性 质 过 于 专门 一 些 ， 

一 个 值得 注意 的 现象 是 : 有 些 甚至 很 常见 的 估计 , 不 基 在 平方 
损失 下 任何 先 验 分 布 的 Bayes 合计 . 小 下 面 的 例子 ， 

例 2.3.4. 设 瑟 至 为 iia. 样本 ,服从 方差 已 知 的 正太 
分 布 。 由 于 为 完全 充分 统计 量 ， 转 化 到 王 来 考虑 ， 就 相当 于 
n 二 1 的 情况 .。 因 则 ,我 们 设 广 ~ 六 (8, ,损失 沙 数 为 上 (9, 中 一 
(6 一 "8 的 先 验 分 布 为 <， 要 求 6 的 Bayes 估计， 我们 证 胡 ; 
”不论 先 验 分 布 如 何 , 于 决 不 能 是 9 的 Bayes 估计 ， 

设 营 不 然 ， 则 对 某 个 先 验 分 布 向 日 的 Bayoa 生计 (在 平方 损 
失 旭 一 0) ”之 下 ) 为 w， 则 由 定理 2.3.2 将 得 


pe (0), (2.3.32) 
对 任何 sE 有 及， 记 
* 让 = 


ho) =| es aE), (2.3.33) 
依 定 理工 .3.1, 凡 (四 可 在 积分 号 下 求 导 来 计算 , 得 
h' (2) = | ee — es" ge 0). 
依 介 .3.32), 得 如 (2)=0， 帮 有 {2) 在 RI 上 为 一 常数 CC. 令 2>oo0， 
用 控制 收 襄 定 理 , 可 在 名 .3.88) 积 分 号 下 取 极 限 , 这 样 得 到 0 一 0, 
于 是 
人 (0) 0， 对 一 切 + 及 


但 ew3 在 卫 , 上 处 处 大 于 人 0 而 | 收 (0) -1, 这 显然 是 不 可 能 


的 . 

所 以 , 若 局 限于 Bayes 估计 , 则 那 怕 像 常见 的 样本 均值 , 也 可 
以 不 在 其 列 。 这 种 情况 难免 给 人 以 不 足 之 感 ， 俱 我 们 在 全 2.3.8 
中 已 注意 到 : 到 可 以 作为 -一味 Bayes 估计 的 极限 得 到 ， 这 舟 示 我 
们 ， 必 须 把 能 作为 Bayes 入 计 的 极限 的 那 神 全 计 考 虑 进来 。 这 种 
估计 就 是 所 谓 “ 广 义 Bayes 估计 ”， 显然 , 每 个 Bayes 估计 都 可 以 看 
成 是 广义 Bayes 估计 . 

但 对 于 “一 串 合 计量 的 极限 * 这 个 概念 ， 我 们 还 没有 给 予 正式 
的 定义 ， 上 酌 启 示 我 们 ， 侯 乎 可 将 这 全 概念 定义 为 一 中 鸽 计量 
{2))} 称 为 当 m>oo 时 收 敏 于 估计 其 9 了 300), 或 堆 说 , 5() 是 
(0) 当 wxoo0 时 的 极限 , 才 

Him 9。(%) 一 9(2)， 对 任何 2 如. 
或 略为 放宽 一 点 ， 和 将 上 式 改 为 对 2 只 是 (ae,Pe) 成 立 ， 对 任何 
8 5B，、 这 个 定义 昌 则 大 体 恰 当 ， 但 在 理论 上 说 失 之 过 强 ， 下 而 较 
英和 的 定义 在 一 些 理论 研究 中 被 证 明 是 怡 当 的 。 为 简单 计 ， 考 虚 判 
决 空间 为 欧 氏 的 情况 ， 

定义 2%.3.6 (判决 重 数 序列 的 正则 收 就 )，、 设 于 的 样本 空间 、 
分布 族 分 别 为 4( 孕 ; 志 )，(Po, 096 的， 判决 空间 ( 信 ， 光 2) 为 局 氏 
的 ， 设 ,5 52, … 为 判决 函数 (可 以 荐 随机 化 的 }。 若 对 任何 在 
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a 


多 上 有 界 连 续 的 函数 ww 及 和 上 的 满足 条 件 
| lgko) laPsGm <co， 对 任何 9E@ 
的 画 数 gCz), 必 有 
lim 人 so a jy)dPeG 


~{ [fue, ed g(aPe(D) ,对 任何 9€8. 
(2.8.84) 
则 称 序列 81，5,,… 正 则 收复 于 5, 记 为 5 一 > 3 或 lim 6。 一 6 
在 6., 8 都 是 非 随机 化 的 场合 , (2.3.34) 转化 为 
lim| uC8, Cw)) yr)aP, (%) 


-| uid Ce) g(aP,(e), 任何 8E@。 (2.8.85) 


由 测度 论 中 可 知 的 定理 不 难 推出 , 若 5,, 8 都 是 非 随机 化 的 ， 洒 由 
Hm 3 (0 一 8(z)，(a.e.Po) 对 任何 9, 或 对 任何 9E6, C2) 依 概 
率 PP, 收 全 于 (4), 都 可 以 推出 如 一 > 8 

定义 %.8.7. 向 3 为 关于 先 验 分 布 各 的 Bayes 解 ,nm 2 
而 5 一 -> 8， 则 称 8 为 三 义 Bayes 解 ， 

从 钢 2.3.4 可 看 出 引进 广义 Bayes 解 的 部 分 理 出 (注意 ; 这 例 
说 明了 广义 Bayes 解 不 必 是 Bayes 解 )。 但 从 理论 上 看 , 引进 广义 
Bayes 解 的 主要 理由 与 关 雇 菌 数理 论 中 另 一 重要 概念 有 关 . 

定义 2.3.8.( 判 决 函数 的 完全 类 和 本 质 完全 类 )， 设 在 一 定 
的 统计 判决 问题 中 , . 录 为 基 些 判决 阴 数 的 类 ， 车 对 任何 不 周二 
. 妈 的 判决 函数 8 必 存 在 属于 .在 的 判决 通 数 入 ,至 

RD, 5) 居 刀 (和 5)， 

对 一 切 9E 是 不 等 号 至 少 对 一 个 日 成 立 ， 出 称 . 录 为 一 个 完全 
类 、 车 在 定义 中 去 掉 “ 不 等 号 至 少 在 一 个 点 8 处 成 立 ” 的 要 求 ， 出 
.UH 称 为 本 质 完全 类 ， 
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换 名 话说 , 如 果 一 个 类 . 妈 是 完全 的 , 唱 只 项 考 虑 属于 它 的 判 
决 函 数 就 侣 了 《如 果 判 决 晴 数 的 优 沙 纯 由 其 风险 函数 来 比较 的 
话 )， 落 - 妈 肖 本 质 完全 的 ， 则 考虑 . 友 以 外 的 羯 快 通 数 决 不 会 带 
来 什么 好 处 .我 们 已 见 过 本 质 完全 类 的 例子 , 那 就 是 充分 性 原则 ， 
它 说 明 ; 基于 一 充分 统计 景 的 判决 耳 数 的 全 体 , 构成 本 质 完全 类 ， 
文 定理 2.1.8 可 解释 为 车 只 演 虑 满足 条 性 百 s(3(Z))<ee 的 判 
决 函数 , 则 当 损 失 函 数 为 凸 图 数 时 , 一 切 基于 一 充分 统计 量 的 非 随 
机 化 判决 函数 构成 本 质 完 全 类 , 而 在 损失 冰 数 为 严 凸 时 , 网 构成 一 
完全 类 . 

引进 广义 Bayes 解 的 迎 由 在 于 : 可 以 证 明 ; 在 很 宽 的 杀人 忻 下 ， 
一 判决 问题 的 全 部 广义 Bayes 解 组 成 一 个 完全 类 ， 这 是 Wald 在 
其 名 著 [I2] 中 得 芥 的 主要 结果 ， 由 于 本 书 的 性 质 , 此 处 不 打算 手 
述 定 理 的 严格 表述 及 其 证 明 . 

另 一 个 与 广义 Bayes 估计 右 关 药 问 题 如 下 ， 还 是 从 例 2.3. 竺 
谈 起 , 我 们 已 指出 : 若 了 ~ 入 (6, 力 而 损失 函数 为 妈 一 办 ”% 则 在 任 
何 先 验 分 布 之 下 ,二 不 能 是 Bayes 解 ， 妓 不 可 能 对 一 切 的 4 函数 


K(g, = 人 -ae (2.3.36) 


对 & 的 最 小 值 都 在 a 一 s 处 达到 ， 伺 是 ,如果 我 们 把 “ 先 验 分 布 ”的 
概念 作 一 点 推广 , 咒 不 要 求 它 是 概率 测度 , 而 只 要 是 尺 。 上 的 一 个 
c“- 右 限 测度 就 行 ， 那 么 就 可 以 找到 一 个 这 样 的 测度 喜 使 由 
(3.3.36) 定 义 的 五 人 中 对 有 4 的 最 小 值 在 4=4 处 达到 .实际 上 ， 
信 上 为 囊 上 的 工 测 庶 ,就 满足 这 今 要 求 ， 在 这 个 意义 上 , 可 以 把 
2 看 成 基 一 个 "Bayes 信 计 ”， 这样， 我 们 有 了 Bayes 估计 的 两 个 推 
广 : -一 个 是 通过 前 桓 定 义 的 正则 收敛 , 另 一 个 是 这 里 的 作法 ， 自 然 
地 产生 了 这 两 个 推广 是 理 一 致 , 在 什么 条 件 下 一 致 的 问题 ， 自 
1968 年 以 来 , 关于 这 方面 已 有 了 某 些 工作 ， 


(五 ) 可 测 性 与 Bayes 解 的 存在 定理 
在 (二 ) 中 ， 我 们 对 Bayes 观点 下 的 统计 判决 问题 提 法 作 了 数 
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学 士 的 描述 、 在 那里 遗留 下 车 干 与 可 测 性 有 关 的 问题 没 有 处理. 
例如 ,在 定义 Bayes 风险 (2.3.2) 时 ,我 们 把 BR(9, 5) 对 专 作 积分 ， 
这 要 求 及 (9, 8) 作为 6 的 函数 为 多 。 可 测 ， 只 有 把 这 些 问题 弄 清 
楚 了 , 才 算 达到 了 严格 的 数学 标准 的 要 求 ， 这 一 段 的 日 的 就 是 讨 
论 这 个 问题 

首先 列举 所 需要 的 假定 (2 8), (Ps, 9€9),( 儿 ,32)， 
IL(9, 四 的 意义 与 以 前 一 样 

1 Po(4) 当 4E 绍 = 问 定 时 ,为 杀 s 可 测 . 

2. 工 (4, 四 为 轨 ex Za 可 测 函 数 ， 
一 般 常 有 (Ps, 859) 4, 上 为 急 上 的 co 有 限 测度 ， 记 2 细 
dP(w) /dp， 各 果 p(w, 从 为 罗 wx 细 可 测 ， 那 么 条 件 工 必 入 
足 ( 见 下 )， 反 过 来 ,车 条 件 荆 满足 , 则 仔细 检查 Radom-Nikodym 
定理 的 证 明 过 程 不 难 知道 , p(w, 纯 必 可 取 为 gwx 移 。 可 测 ， 

现在 证 明 ，(0，3) 为 9 的 Go- 可 测 函 数 ， 为 此 需要 以 下 几 
点 事实 ， 

a. 车 flw, 月 非 负 且 吨 w x 绍 可 测 而 条 件 1 成 立 则 
| Ge, 0)4Ps() 为 9 的 多 se- 可 测 丽 数 

事实 上 ， 先 考虑 形 如 Co, 四 一 Io(w 四 的 f, 此 处 CE 到 sx 
多 s， 当 C 有 4X 的 形状 , 其 中 4E 绍 ,BE 儿 s 时 , 所 述 事实 
成 立 . 面 一 切 使 4。 成立 的 C 显然 为 一 单调 类 , 故 包含 了 Bs x 多 
然后 可 以 用 例 行 的 推理 ， 撞 到 了 为 非 负 简单 可 测 及 一 般 可 测 的 情 
形 . 

b. 研 (9, 3() 为 加 ex 绍 s 可 测 信 为 非 随机 化 判决 汪 数 ). 

事实 上 , 由 假定 2 可 知 , 欲 证 p 只 需 记 

{(0, ®): (0, 8(0)) EH} € Ho x Ba 对 任何 SE 8ox Be. 

但 显然 当 3 一 Six 33 时 对 ， 此 处 pi E 多 os 54€ 弥 s， 而 一 切 使 上 
述 事实 成 立 的 8 构成 一 个 o- 域 , 故 包含 了 一 切 史 ex 少 。 可 测 集 . 

o- 着 了 (6, 候 为 非 负 溉 ox 绍 s 可 油 , 则 | 7 (6, 必 8(m, a 为 
吕 gX 鸭 w 的 可 测 . 
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事实 上 , 这 不 过 是 4 的 另外 一 个 形式 . 由 a b,c, 注意 天 0, 辣 
的 宕 达 式 过 . 生 . 直 和 红 .4. 和 ， 央 推出 吓 (8, 的 为 8 的 溉 oe- 可 测 应 
数 . 由 a 显然 可 以 得 出 前 而 指出 的 事实 ， 由 p(x, 办 的 人 Bax 5 
可 测 性 排出 条 件 工 潢 足以 上 的 推理 也 适用 于 证 蝎 胃 名 .3.100 所 
定义 的 后 验 风 险 为 了 的 宛 s 一 可 测 函 数 . 

在 公式 他 .3 四 中 ， 融 要 和 证 明 Peteco) 的 鹏 o 可 测 性 ， 当 为 
OX O; 的 形状 ， 其 中 0 所 仇 6g，O2E 家 时， 这 显然 成 立 ， 热 后 不 
难 推 到 一 般 芍 CEBex Be 的 情形 . 

在 作 了 二 述 准 符 工 作 以 后 , 我们 来 讨论 下 而 的 问题 : 在 什么 条 
件 下 存在 一 个 判决 丽 数 ， 处 处 (对 中 夺 到 后 验 风 险 的 最 小 值 。 关 
于 这 个 问题 在下 而 的 定理 ， 

定理 2.3. 和 &， 设 变量 立 的 群 本 空间 为 ( 吃 ， 培 z)， 分 布 族 为 
(DP, 9E9)， 假 定 ( 昌 , 乡 @) = (Ho 60)， 判 决 空间 为 ( 久 , 纤 2 一 
(Bo 训 ), 损 突 消 数 蕊 (9, 由 在 RR Xx R. 上 连续 , 且 对 任何 光 定 的 #8 
" 0 De 
先 验 分 布 为 则 存在 非 随机 化 判决 通 数 3 处 处 达到 后 验 风 险 的 
最 小 值 . 

证 明 依 赖 于 下 面 的 引 理 . 

引 还 2.3.3、， 设 {Sxto)} 为 一 串 击 ( 受 ， 多 到 (BR co 的 可 
测 变换 ， 若 对 任何 zE 全 ，{ 名 (全 } 为 Ba 中 之 一 有 界 点 列 ， 则 看 在 
赎 ( 肥 ， 胃 四 到 (Be， 有 o 的 可 测 变换 8(o)， 使 对 任何 zE 人 生存 在 
子 序列 { 包 (可 与 各 有关)， 吾 li Ss Cr) 一 Stz)， 


这 是 作者 在 < 转移 向 基 的 Minimaz 估计 > 一 文 ( 载 < 数学 学 报 ? 
J964 年 第 一 期 ) 中 证 明 的 一 个 引 理 . 由 于 证 肯 涉 及 -一 些 复杂 细节 ， 
在 比 从 路 了 

现 以 # (61 多 记 在 先 验 分 布 £ 之 下 ， 给 定 于 一 w 时 六 的 后 验 
分 布 。 定 义 

下 人 a) = zc， 四 eaglm， (2.8.87) 
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Es, 四 ~ £0, DE dD 2), m=—1, 2，… 
Km 中 为 有 的 连续 函数 。 在 乡 中 取 一 个 处 处 狠 审 的 点 列 雪 路， 
旭 inf Km, 0) 一 if 及 wz d9, 由 此 知 inf K nts, 中 为 画 。- 可 
测 。 故 对 任意 的 s 盖 0 集 
,~ to: Km (ee, dD) < inf Kn (yp 只 十 时 ， $=1, 2, 

都 属于 鳃 <。 令 也。 有 Bs 一角 , 一 站 太一 2,3,…, 则 诸 
五 。 都 属于 统 w， 两 两 元 公共 点 且 其 并 为 全， 令 

G0) =d, YB EB $=1, 2.. 
则 于 (0) 为 多 -可 测 ， 且 Kn (0) 所 inf En (zw, 二 十 E 对 一 
切 wE 生 ， 现 在 歌 一 串 ss 0， 则 人 对 损失 画 数 工 (9, 中 的 假定 可 
知 , 对 任 宁 wE 吕 ,序列 信 , Cw)} 保 持 有 界 、 因 此 由 引 理 3.3.3 可 
知 , 存在 一 个 由 (党, 事 到 (多 弛 四 的 可 测 变换 5。(w), 使 对 任何 
jw 存在 合 (2)} 的 一 子 序列 6 (2) 6 (0) . 显然 ,在 

Kn, 5.. C2)) < inf Kul%, D+ Bi 


令 jo0, 将 得 nr， Bm) ) 蕊 inf Kn (Cr, 荔 ， 邑 


Kms, Sm (02)) = inf 下 mo 2), 二 (2.3.88) 
现在 证 明 ; 对 任何 s€ 纹 有 (区 (Cw, 内 兄 (2.3.37)) 
lim Knts, su) ~inf Elo, D), (2.3.39) 


为 了 证 明 先 注 意 五 wz，3w(o)) 随 各 增 其 而 非 降 ， 故 极 限 
lim Kn Cw, Swl%2)) 存 在 ， 记 之 为 仔 . 分 两 个 情况 : 

1, 长 (wD) 一 co, 对 一 切 4E 多， 这 时 ,车 s<co, 则 {6w(D)} 

必 保 持 有 界 . 因 若 不 然 , 则 将 有 子 序列 从 wo)} 存 在 , 致 |3w) | 一 


cs， 国定 区 致 二 人 虹 委 oj| 罗 > 这 时 将 有 ( 俊 Faton 引 理 ) 
Se>>G 一 Jim Kn ls, Sn)) 


>lnminf Ze， Bm, (2))é (a012) 


+ 1d 


> Him inf D0, Sm (2))1é dle) 


=ooxE([0 me) = 0, 
困 而 得 出 矛 导 ， 这 证 明了 fsm (2)} 的 有 界 性 ， 因 而 存在 子 序列 
5m(w)>do, do 是 多 中 基点 ， 这 时 对 任何 同 定 的 有 当 $ 充 分 大 
时 ,有 
D0, mo))E 9] | LO, Bu,C0)) (201%) 
=En (lw Onl ) EALo0, 
令 i_>oo， 自 控制 收 华 定 理 ,有 


fi, (2 dN) EB ls) A. 


再 令 六 co, 知 玉 (wdo) 所 4， 与 假定 不 合 . 
2. 存在 4E 儿 致 KE(w,0)<o, 这 时 infK(w, 的 5<eo， 


设 攻 mn(w， Bm(w))->m， 由 前 面 的 推理 ,知人 6m 《2%)} 有 界 。 和 1 完全 
同样 的 讨论 ， 将 得 到 别 E 多 致 玉 (zx, do so 故 3<4， 但 显然 
PE， 因 而 =z， 这 证 明了 (人 2.3 8)， 

由 《2.8.89) 特 别 推 知 inf KK (w 四 为 哆 = 可 测 , 故 集 


{o:inf KF (om, od) ~ co} € a, 


在 这 个 集 上 , 可 指定 5 等 于 允 中 基 个 ， 因 此 , 不 失 普 过 性 可 
很 定 一 

inf K (%, 中 之 o0， 对 一 切 ws&E2， 
固定 j， 当 各 庆 j 时 ,有 


Ge 6» (0))€ (40|%) <| a DIRE 


[I 


<inf K(w, 四 <. (2.8.40) 
取 了 充分 大 ， 致 9 引 志 让) > 由 由 对 工 介 路 的 假定 ， 见 知 
{mCD} 有 界 。 由 引 理 2.3.3, 知 存 在 由 (县 ， 轨 由 到 (多 ,元 四 的 
可 测 变 换 ， 妓 非 随 机 化 判决 函数 3(o)， 重 对 任何 wsE 到 存在 子 序 
丈 wy 至 lm 8,2)~— Mw), 在 (2.3.40) 中 改 吉 为 6, 再 令 人 >co 得 
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{Le 8) (a lo) <int Flo, 四。 


再 令 j>00, 即 得 匡 (w,， 8()) = inf 太 (%, 内 ,因而 6(w) 处 处 达到 
后 验 风 险 的 最 小 值 ， 定 理 证 毕 ， 
由 这 个 定理 显然 得 到 
系 2.8.1. 在 定理 2.3.4 的 条 件 下 ， 若 Bayes 解 5. 的 Bayea 
风险 有 限 ， 出 任何 Bayes 解 3(m 人 下 必 清 足 条 件 Cw, DD,) 一 二 其 
中 访 ,E 多 %s, 且 
PCD 过 :本 (的 ~inf EK (%, d)}. 


换 名 话说 , 在 上 述 条件 下 , “使 后 验 风 险 达 到 最 小 ”也 是 Bayes 解 的 
必要 条 件 . 

利用 这 个 定理 ， 容 易 严格 证 明 由 定理 2.3.2 所定 出 的 在 平方 
损失 下 的 Bayes 解 (2.3.18)， 是 多 ~ 可 测 的 ， 这 一 点 作为 练习 贸 
给 读者 ，- 

由 于 常见 的 机 失 函 数 ( 包 括 平方 损失 西数 ) 都 满足 定理 2.3.4 
的 变 求 , 这 个 定理 有 一 定 的 意义 ， 也 不 难 举例 证 明 : 当 定理 条 件 不 
满足 时 ，Bayes 解 可 以 不 存在 . 


(六) 经 验 Bayes 方法 


前 面 已 经 提 到 ，Bayes 方法 的 基本 假定 是 参数 8 是 随机 变量 ， 
有 一 定 的 概率 分 布 6 吾 (的 .即使 在 这 个 前 提 能 被 认为 合理 地 成 
立 的 情况 ，4Q 吾 (站 一 般 也 是 未 知 的。 在 实际 应 用 Bayes 方法 时 ， 
不 能 不 对 之 作 一 些 密 少 有 些 人 为 的 假定 。 这 是 Bayes 方法 用 诸 实 
际 问题 时 的 一 个 根本 弱点 然而， 若 先 验 分 布 4 瑟 (从 虽然 未 知 ， 
但 在 历史 上 浓 经 处 理 过 有 关 8 的 推断 的 一 些 问题 . 在 这 些 问 题 中 ， 
先 验 分 布 2 吾 { 四 保持 不 变 ， 则 历史 资料 中 将 包含 有 这 个 先 验 分 布 
QH (办 的 信息 ， 经 验 Bayes 方法 (Empirioal Bayes Prooedurey 的 
要 骨 在 于 利用 这 种 信息 来 对 先 验 分 布 4 瑟 { 四 作出 估计 ， 随 着 万 
史 资 料 的 积累 , 这 种 估计 人 钝 米 愈 准 确 ,而 所 得 的 解 也 就 人 鳃 来 盖 接 近 
在 先 验 分 布 d 互 号 已 知 时 所 算出 的 Bayes 解 。 
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为 了 把 这 个 概念 严格 地 讲 清 楚 ， 我 们 考虑 一 般 的 模型 长 光 ， 
胸 s， Po ,08E 人 , 先 验 分 布 为 4d 吾 (). 设 我 们 在 历史 上 己 和 这 措 
型 多 次 打 过 交道 , 在 第 ;个 用 这 模型 来 描述 的 实际 问题 中 , 得 到 的 
样本 为 十， 而 9 的 真实 值 为 ,这 个 员 当然 是 我 们 所 不 知道 的 ， 
且 正 是 第 个 实际 和 癌 题 中 的 推断 对 象 . 

按 Bayea 方法 的 观点 ，( 卫 人 ,4 一 I， …, mm 不 是 别 的 ， 正 
是 从 样本 空间 (他 x@ 绍 sx 织 外 中 按 概 率 分 布 


PC) 一 上 Ps AddH (0) 


抽出 的 iia. 样本 .此 处 4E 绍 zx 绍 g 而 所 = 后 : (从 EE 习 、 热 
而 ,在 这 个 “抽样 ”的 过 程 中 ， 我 们 只 得 到 了 卫 ,,，…， 芒 。， 而 未 得 
到 员 …， 多 之 慎 , 后 者 是 “自然 界 ” 为 我 们 选 定 而 对 我 们 “保守 秘 
密 ” 的 、 但 是 ， 即 俐 只 是 这 些 下 1,…， 之 。。 也 包含 了 a 有 (外 的 信 
息 ， 因 为 ， 根 据 (二 ) 中 记述， 在 本 模型 下 , 家 zw …， 地, 实在 是 从 
“绝对 分 布 ” 


P(4) = jf,PeWanH @), AEg 


中 抽出 的 iid, 样本 ， 币 这 个 分 布 就 依 束 于 SB( 人 由 此 可 见 ， 
五 ,,，…， 卫 ,中 现实 包含 了 Q 互 (四 的 信息 ,这 一 点 正 是 经 验 Bayes 
方法 的 基础 . 

现在 设 这 个 模型 在 历史 上 曾 使 用 过 ”次 (其 中 先 验 分 布 4 甩 (的 
昌 未 知 , 但 总 保持 不 变 ), 在 这 = 次 中 , 样本 为 耳 :, …， 五 ,依据 
这 些 历史 资料 ， 我 们 对 先 验 分 布 g 瑟 (全 有 一 定 的 舍 计 ， 结 果 不 芒 
记 为 4 及 旬 | 了 于,，…， 于) ， 在 这 个 先 验 分 布 之 下 ， 当 这 模型 在 第 
n 十 1 次 使 用 ( 料 本 为 五 ,4) 时 ， 我 们 自然 就 使 用 基于 先 验 分 布 
dH 8| 了 1 …， 瑟 的 Bayes 解 6,《Z1，…， 卫 s; 广 n+1)。 这 记号 
表示 出 , 所 用 判决 函数 6, 与 历史 资料 也,,…， 玉 。 有 关 ， 当 在 第 
十 个 问题 中 使 用 这 个 判决 函数 时 ， 其 Bayes 风险 将 是 与 人 Xz 
…， 工 。 和 5。 有关, 可 记 为 
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RO,; AX1, ,Tn) 
-| LG (Es, -Xu XR), WaP' (le, 有. 


此 处 瑚 为 (了 ,人 力 的 联合 分 布 , 如 前 面 所 定义 首 . 

但 是 ,历史 资料 子 1,…， 王 ,本 身 也 是 随机 地 取得 的 , 因此 在 
评价 = 入 1 ”9 ns 广 s+1) 的 好 坏 时 ， 不 能 看 BO,, 1 yy 
互 ,), 而 可 着 这 个 量 对 于 …， 下 的 平均 值 ， 由 于 互 1 三 
独立 且 各 有 分 布 五 ( 即 先 验 分 布 4 豆 之 下 至 的 绝对 分 布 , 故 

局 (8 一 吾 [ 且 (8 (1, ~ 


-| BG 1 EIAPED) dP (XL,). 


这 个 量 当 然 不 能 小 于 先 验 分 布 真 正 已 知 时 的 Bayeg 解 35 的 Bayes 
风险 Bx， 但 是 , 前面 的 讨论 使 我 们 有 理由 期 望 , 下 面 的 且 标 
lm FB (0.) — Br 
能 达到 . 
定义 2.8.9. 如 果 一 串 经 验 Bayes 判决 函数 人 6,=5,( 革 1 …， 
于 si 卫 st1 让 满足 条 件 ln 亚 Go 一 及 x, 则 称 {s}, 或 简单 地 565. 为 


渐 近 最 优 (a. 0.) 经 验 Bayes 解 (对 某 分 布 族 党 内 的 五 ). 

注意 在 定义 中 并 未 明确 要 求 各 8， Wi 49 是 某 个 先 验 
分 布 的 Bayes 解 \ 在 前 面 为 了 说 明 方便 , 曾 作 了 这 个 假定 ). 

由 于 这 里 涉及 的 问题 是 合计 整个 分 布 , 所 以 , 当 事 洁 对 先 验 分 
布 4 (的 真 量 一 无 所 知 时 ， 经 验 Bayes 方法 的 实际 价值 媳 来 还 是 
有 限 的 ， 且 不 说 在 一 较 长 历史 时 期 中 先 验 分 布 保持 稳定 这 一 要 求 
不 其 现实 , 而 且 , 如 果 经 验 分 布 完全 未 知 , 要 构造 出 3 使 下 (8) 足 
够 快 地 收 族 了 于 Bz, 也 不 是 容易 解决 的 问题 ， 如 果 事先 假定 先 验 
分 布 属于 一 定 的 类 独 而 具有 某 些 参 数 未 知 ， 数 学 上 的 处 理 ， 经 验 
Bayes 解 的 构造 ， 当 然 要 容易 些 。 但 这 又 引进 了 一 种 人 为 性 的 做 
定 , 而 与 愿 米 引进 经 验 Bayes 方法 的 出 发 点 有 所 背离 。 我 们 举 一 
个 这 样 的 简单 例子 来 说 明 经 验 Bayes 方法 . 
设 圾 的 分 布 为 广 旭 了 :一 co<9<ece、 损 失 函 数 为 开 介 加 
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= 色 一 助 ”已 知 虽 的 先 验 分 布 为 不 人 0， ， 全 不知 0 之 值 ， 设 
三 1 …， An 为 历史 样本 ， 由 于 在 先 验 分 布 Wo, 5 站 之 下 , 大 的 
绝对 分 布 显 然 是 总 (0, 1+o”), 所 以 由 历史 样本 自然 地 得 到 0 的 


信和 六 t= 二 六 XX? 一 1。 根据 例 2.3.3( 取 %w~ 了 ， 在 先 验 分 布 


六 (0，83) 和 平方 损失 之 下 ,6 的 Bayes 解 的 风险 函数 为 (33 十 的 )/ 
(53 十 1”，Bayes 风险 为 (因为 8~NO0, 的)， 加 (的 ) = 的 ) 

(Gat on) /+ 6 二 1). 
这 个 量 小 于 1, 而 且 当 ”>ee 时 ,以 概率 为 革 地 收 作 于 ca/ 上) 
由 控制 收敛 定理 ,有 

lim BIé/ (St+D)] ~o/ +o’). 
但 右边 不是 别 的 , 正 是 在 o? 已 知 , 妈 8 的 先 验 分 布 玉 (0, o 中 已 知 
时 ， 在 平方 损失 下 8 的 Bayes 解 的 Bayes 风险 ， 于 是 要 据 定义 
2.3.9,， 在 先 验 分 布 六 (0, 6) 之 下 的 Bayes 估计 


Ed 


Ba CR ys i Xn) = Tr ot 一 ——— 


是 在 平方 损失 及 先 验 分 布 族 {N (0, oo :> 时 之 内 的 a. 0. 经 验 
Bayes 解 . 


《七 Minimax 估计 


一 般 统 计 癌 题 的 Minimaxz 准则 , 已 在 $1.4{ 五 ) 中 介绍 过 了 ， 
此 处 对 点 估计 问题 形式 地 写 出 其 定义 如 下 ; 

定义 2.8.10. (Minimax 估计 ). 设 ( 儿 级 ，(Po， 8Eg) 是 
变量 及 的 样本 空间 和 分 布 族 ,( 儿 ， 妆 5) 为 判决 空间 , 9 (多 为 定义 
于 日 上 前 待 估 消 数 , (8, 中 为 损失 西数 . 如果 存在 估计 景 好 , 至 

sup RO 噬 sup Rg, H, 

对 任何 佑 计量 3 则 称 部 为 y( 四 的 一 个 Minimax 估计 . 

这 个 概念 与 Bayes 估计 有 联系 ， 实际 上 ， 到 和 前 为 止 ， 守 求 
Minimaz 估计 的 主要 方法 仍 是 基于 下 而 两 个 简单 定理 . 
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定理 2.3.5， 设 了 (wm) 为 在 完 验 分 布 上 之 下 g( 四 的 Bayes 估 
计 . 车 闪 的 风险 函数 为 一 常数 0, 则 各 为 g9( 欣 的 Minimas 合计 ， 
证 . 设 车 不 然 , 则 存在 估计 量 六 ， 玛 
sup RC, g") < sup ROO, 9) —0. 
因 南 6, g") <O 对 一 切 9E9, 故 
| Re ga (0) <of aé (0) =| BO, MWCO). 
这 显然 与 弛 为 先 验 分 布下 的 Bayes 估计 矛盾 ， 
定理 2.3.6. 设 访 人 o) 为 在 先 验 分 布 如 之 下 ，9 (的 的 Bayes 
估计 ， n= 1, 2, yy 车 了 为 一 估计 量 , 致 
>ap RG, H) <limsup RG) = O00. 
则 了 为 y 的 的 Minimax 估计 . 
证 . 车 六 不 为 了 (的 的 Minimaz 估计 , 则 存在 估计 量 g'， 致 
sup RD, 9) < mp RY, DOEO, HCL, 
因而 存在 s 守 0, 致 
RG, 9g) <0' 一 2s， 对 任何 6E8, 
由 于 im sup Re, (9G) ~C， 存 在 充分 大 的 zz 至 
Rr, (I 0'—8, 
但 Rep) ~ | RG, gaéy (0) <0' 一 26<0' 一 sRe, (Gv), 这 显 


然 与 gr 为 在 先 验 分 布 Sx 下 的 Bayes 估计 矛盾， 证 毕 ， 

例 2.3.5. 设 变 量 气 服从 二 项 分 布 Ba 修 , 损失 函数 为 
LI(6, 中) 一 上 四 一 )，， 要 估计 900) ~6、 在 例 2.8.2 中 我 们 已 求 出 
估计 量 (2.8.27)， 它 的 风险 函数 为 常数 ,上 且 它 是 一 个 Bayes 佑 
计 , 故 外.3.29) 就 是 在 平方 损失 下 , 9 的 Minimax 合计 ， 

例 2.3.6. 设 时 J， 于。 …， 于, 为 id. 样本 ,里 1 服从 雹 值 为 
0, 方差 为 1 的 正 态 分 布 ， 损失 双 数 为 IL(6, 僧人 8 一 0) 要求 
900) =0 的 Minimaz 情 计 ， 由 于 从 为 完全 充分 统计 早生 服从 均 


值 为 4 方差 为 二 的 正 态 分 布 , 帮 转 化 到 六 后 , 我 们 得 到 下 面 的 问 
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题 : 了 ~ 和 W(6, 工 )， 损失 西数 为 (6, 四 ~ (一 四 % 求 9 的 
Minimax 估计 。 在 例 2.3.3 中 ， 我 们 找到 了 一 串 Bayes 信 计 名 
氏 一 1, 2 …( 见 (2.3.29)), 其 Bayes 风险 当下 ->eo 时 趋 于 请 ， 
而 估计 量 卫 的 风险 函数 正好 等 于 这 个 常数 ， 因此 ， 它 就 是 9 的 
Minimaxz 估计 

例 2.8.7， 要 使 Minimax 估计 的 问题 有 意义 ， 必 须 对 损失 函 
数 作 适 当 的 选择 , 一 言 以 蔽 之 , 损失 函数 至 少 必须 满足 条 件 : 存在 
一 个 估计 多 使 sap RC9, 分 <oo、 和 否则 任何 估计 都 是 Minimax 


估计 , 市 使 Minimazx 原则 在 该 问题 中 变 得 没有 意义 . 

例如 , 设 及 …, 瑟 为 iid, 样本 , 工 : 一 克 (a 03), 一 (4, c3)， 
损失 函数 为 @ 一 OD"。 这 时 求 9( 提 -6 的 Minimax 估计 的 问题 就 
没有 意义 。， 因 为 (以 后 将 严格 证 明 ), 对 充分 大 的 9, 任何 居 计 的 风 
险 都 能 任意 大 ， 但 是 , 如 果 把 损失 函数 取 为 

LO, D = (Gd—a a, (2.8.41) 

则 可 证 明 : 及 为 a 的 Minimax 悄 计 . 

事实 上 , 取 先 验 分 布 总 如 下 ; 让 各 的 测度 全 集中 在 直线 o 一 1 
上 ， 且 在 这 条 走 线 上 a 的 分 布 为 入 (0,，EK)， 这 时 在 得 出 样本 
mm …，ts 后 , 和 的 后 验 分 布 仍 集中 在 直线 o 一 1 上 ， 且 的 后 验 
密度 为 


co KJexp[~ 吝 训 (|. 
此 处 Ow。K) >0 司 o 天 关 。 这 分 的 人 为 
$2) -TT 


因此 按 定 理 32.3.2， 即 为 yt) 一 4 在 上 述 先 验 分 布下 的 Bayes 信 
计 。 鞭 风险 函数 为 


a -na 7 /e 
1 并 下 7 二 
mn TE 


#1 e 


于 是 租 到 其 在 上 述 先 验 分 布 名 的 Bayes 风险 为 


a_if mE \? 二 
Rob) -F(T) + orn 


当 下 一 co 时 趋 于 二， 而 这 正 是 佑 计 二 豆 的 风险 函数 ， 根 据 定理 
2.8.6, 证 明了 万 为 损失 函数 人 (2.3.44) 之 下 的 Minimas 估计 ， 

这 个 方法 还 可 用 于 更 复杂 的 例子 ， 例 如 , 证 明了 : 若 忌 ，…， 
其 。 为 记 . 拜 本 ,一 We o9， 则 在 损失 丽 数 (4> 由 卫 >0 为 
常数 ) 


总 


La, a, gh, 03) 一 所 迎 一 人 人 人 
”之 下 ， (人 器 的 Minimax 佑 计 为 


~ TI 。 aa 
(= T(t) Ei 人 
2 


然而 ， 这 个 方法 在 一 定 程 度 上 只 是 一 种 验证 某 个 估计 为 Minimax 
估计 的 方法 ， 往 往 需 要 先 “ 猜 ”出 一 个 可 能 的 Minimax 舍 计 , 然后 
再 设法 去 找 定理 中 提 到 的 那 一 中 先 验 分 布 , 在 较 复 杂 的 问题 中 , 定 
理 2.3.6 中 的 条 件 的 验证 往往 有 相当 大 的 困难 ， 为 了 使 谈 者 对 使 
用 上 述 方 法 前 困难 所 在 有 更 清楚 的 了 解 ， 我 们 考虑 一 个 较为 复杂 
.的 例子 . 

例 2.3.8， 设 观察 值 瑟 ，…， 互 。 独立 ， 互 ; 可 表 为 

芒 4 一 人 十 十 81 一 1， :和 ‘(2.3.42) 

这 里 六 …， 声 为 已 知 数 ， 其 中 至 少 有 三 个 不 同 的 , 6, 5 为 末 知 参 
数 , eu es 为 误差 , 它们 独立 园 分 布 ， 有 均值 0, 对 工 测 度 有 已 
知 的 密度 六 数 了 (w) 了, F(z) 满足 条 性 

工 .于 (一 号 =f (0), 

2. fo) =0 当 |z|>>4， 对 某 个 4E(0， cc)， 


芒 由 下面 的 讨论 不 难看 出 , 只 须 候 定 a 有 有 密度 函数 十/ (入 ,其 中 了 已 知 , 且 济 
足 此 处 的 三 条 件 , o>0 未 知 ,本 例 结果 仍 保持 成 立 。 
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3. 当 sz220 时 ,Fo 单调 非 载 ， 
损失 函 煞 为 
Lf{a, bo BN 一 (0—0)2+ 0— 0, 
要 求 (w 中 的 Minimax 售 计 ，(2.3.42) 就 是 通常 的 线性 间 归 模 
型 . 
我 们 来 证 明 , 若 令 


er 


| 在 f lmao- btydadb 


WD) = 一 一 一 ， 
| 居 Fe 一 3 加西 
网 (2.3.48) 
|js fm abi) da 

V0) = 


a foo- blydadb 


则 Cw( 焉 ),， 2( 玉 站 为 la, 站 的 Minimax 估计 ， 
首先 需要 明确 : (3.3.48) 中 的 各 积分 都 是 有 意义 的 ， 由 下 的 
有 界 性 , 上 只 需 证 明 ，(2.3.4 引 中 各 积分 的 被 积 函 数 ,在 一 面积 为 有 
限 的 区 域 之 外 为 0。 为 此 定义 集合 
再 .一 ffe， :ea— bliA, t=1, 只， 
我 们 证 明 : 吾 。 的 直径 dd 对 4 一 至 有 界 . 不 失 普 遍 性 可 设 五 十 … 
十 如 = 0( 请 读者 验证 )， 这 时 由 于 诸 # 不 全 相同 ， 在 其 中 既 有 正 的 
也 有 负 的 ， 为 确定 计 , 设 所 <0, >0 现在 设 (zo， Po) 和 (四 都 
局 于 厂 ,, 且 了 >W6， 则 5 之 B26ta， 因 而 
+ bla— mot aot bots) 5 — Got we — A. 
但 1%o 一 a 十 ht) | 所 4, 坡 g 一 mo 所 24， 同 法 得 到 4 一 o> 一 24， 
故 l|a 一 qo| 忆 24， 再 由 (以 下 并 不 设 Bt 
gt-bts=68— 0 (aot bota) + DB — bBo) 
民 24 十 本 十 四 十 (8 — bo 
再 出 (G+bts) 一 204 一 和 4 庆 人 6 一 00) > 一 44, 即 加 一 6<44/5. 闻 
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法 可 证 各 一 8 关 44/ 志 ， 这 证 明了 以 上 关于 吾 。 的 直径 对 2 一 致 有 
界 的 论断 . 
定义 集合 DD 一 {Ca 全 :gs 入 | 下 生 癸 。 而 取 先 验 分 布 如 
为 DP、 上 的 均匀 分 布 ， 则 在 得 到 样本 4% 一 (wz …， zo) 时 ，(%, 总 的 
后 验 密度 是 ， 
| 当 《ea, DE BND,, 
po b) — ti 
0, 其 它 的 (&, 中. 
这 里 C( 四 为 一 与 @ 8 无 关 之 数 ， 因此， 出 定理 2.3.2, 天 Bayes 
估计 为 ， 
Wa 人) 一 人 a fo a biddadb/ 


人 了 (一 6 一 5 如 三， 
va) -1 fe btddadb / 
ed 
这 估计 的 Bayes 风险 为 
rh) -| dadb [fm a 


+ (m0 -DF dm de]. 


Elg, 本 一 Tc ***, va)! wm — eo— bt 
A 
因为 对 一 切 w, 召 : 的 直径 史 不 超过 一 个 公共 的 数 7, 知 当 
(ag DD ED 而 | 一 6 一 了 6| 所 4 3 二 1， …,% 时 ， 必 有 Es 匡 DD， 
对 这 样 的 5% 有 坊 (0) 一 ww(0), 0) 一 oa， 所 以 
rhy) > | da ab[ |- {Ce) 0) 4 (vo) ~ 


Dr Kco,b) 


这 里 


x Lf m0 di) deo-den | 


sa 158= 


容易 验证 ,上 式 右边 方 括号 内 的 量 , 即 人 从， 人 o)) 的 风险 ,等 了 
一 与 mw 无 关 的 有 限 常数 了 ， 议 由 7( 交 记 -9 I4 久 一 站 > 了 当 


hh 一 co， 由 定理 2.3.6 即 知 ((0)，9{20)) 为 [4 门 的 Minimazxz 个 
计 ( 本 例 是 作者 的 一 项 工作 , 载 :数学 进展 > 7 卷 4 期 449 页 ， 其 中 
没有 假定 且 考 虚 了 多 元 回归 及 一 般 损失 函数 的 情况 ). 

求 Minimax 估计 芍 问 题 与 下 节 要 讨 抢 的 不 变 原 理 也 有 关系， 

在 结束 这 一 节 以 前 我 们 提 到 Hodges 和 Lebmann 所 指出 的 
一 个 有 趣 的 例子 ,在 其 中 Minimaz 和 估计 是 随机 化 的 ， 他 们 的 例子 
是 : 及 ~BG 及， 损失 函数 为 19 一 中 5 0<y<zl 要 求 9( 押 一 9 
的 Minimazx 估计 . 至 今 并 不 知道 这 Minimax 估计 的 具体 形式 ， 
但 Hodges 和 Lehmann 证 明了 它 决 不 可 能 是 非 随机 化 估计 (参看 
例 工 .4.8， 但 该 钢 看 作 检 验 问 题 更 自然 )， 


§2.4. 不 变 佑 计 与 可 容许 佑 计 

(一 ) 不 变 判决 函数 

从 前 面 儿 节 的 讨论 我 们 知道 ， 因 为 一 般 说 米 一 致 最 优 的 判决 
函数 不 存在 ， 为 了 使 一 个 统计 判决 问题 有 确定 的 意义 , 我们 有 两 
个 办 法 可 以 采取 ; 一 是 纺 小 所 考虑 的 判决 函数 的 范围 ; 一 是 提出 某 
种 较 宽 的 最 优 人 性 准则 ， 无 偏 估计 属于 前 者 , Bayes 和 Minimaz 佑 
计 属 于 后 者 。 本 节 要 介绍 的 不 变 估计 , 则 属 主 前 者 ， 

我 们 先 从 一 个 简单 例子 谈 起 ， 设 我 们 村 估计 的 是 一 件 东 西 的 
长 度 g。 将 其 独立 测量 "次 ， 得 下 1,…， 访 ,， 这 可 以 看 成 是 从 正 
态 总 体 入 (a, oY 中 抽 得 瞧 记 , 洋 本 , 假定 我 们 使 用 估计 量 9( 素 ,， 
…， 卫 ) 去 估计 a. 

现在 设想 改变 量度 的 单位 (例如 , 原 以 尺 为 单位 , 现 以 十 ， 这 
相当 于 把 每 个 数据 都 乘 上 一 个 既定 的 常数 ce>0， 这样 ,根据 估计 
量 在 新 单位 下 应 以 ffowi，…，eow) 去 估计 长 度 ( 它 在 新 单位 下 
有 值 og)。 折 合 到 原来 的 单位 , 就 等 于 用 5Cems, omw) /e 去 估计 a. 
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但 是 ， 我 们 世 可 以 不 作 这 种 单位 前 改变 ， 一 上 来 就 用 fs 
…，om) 去 估计 4。 直观 上 我 们 觉得 , 应当 有 
for oz /c= Gs oe, Wn), CO. (2.41) 
因为 不 然 的 话 , 则 a 的 估计 值 将 与 所 用 的 单位 有 关 , 而 这 看 来 是 不 
合理 的 ， 妈 果 我 们 把 
现 一 tj/o iT mo (2.4.2) 
看 成 样本 空间 色 到 自身 的 一 个 一 一 变换 , 则 对 一 切 0>0, 所 有 这 
些 变 换 构成 一 个 群 外 而 满足 条 件 人 2.4.1) 的 估计 量 乡 则 称 为 在 
群 @ 下 的 不 变 信 计量 ， 刁 求 估计 量 满足 条 件 愉 .4. 几 就 等 于 内海 
虑 具有 (在 群 好 下 的 ) 不 变性 的 估计 量 ,这 样 就 缩小 了 所 考虑 的 个 
计量 的 范围 . 
根据 完全 类 似 的 考 虐 ， 我 们 也 很 有 理由 要 求 信 计量 了 满足 条 
件 
feito 一 用 oo) 十 二 一 co<c<co， 
‘2.4.9 
因为 这 表示 估计 结果 不 诬 与 测量 原点 有 有关。 显然 ， 满足 条 件 
(2.4.3) 的 估计 景 可 说 成 是 在 变换 群 
二 人 一 上 于 CooLoo 
之 下 的 不 变 估 计量 . 
容易 设想 ， 这 个 作法 可 推广 到 更 一 般 的 统计 判决 问题 和 更 一 
般 的 变换 群 。 但 是 , 应 当 注 意 , 尽管 上 述 例 子 在 直观 上 看 来 十 分 简 
单 了 明了， 实际 上 它 在 数学 上 息 售 了 一 些 假定， 只 有 把 这 些 假 定 分 
析 清 楚 了 ,才能 找到 推广 到 一 般 情况 的 正确 途径 . 


首先 ,对 分 布 旋 有 一 定 的 要 求 ， 设 想 我 们 要 估计 R(9 一 去 ， 
9 十 当中 的 外 开 ，…， 环 。 为 其 iid. 样本 . 因为 9 是 分 布 的 均值， 


所 以 ,表面 上 看 , 以 上 的 分 析 完 全 适用 , 从 而 可 要 求 估 计量 8 满足 
从 .<. 功 . 但 是 , 当 将 样本 六 都 乘 以 po>0 得 出 zw 一 oz 总 一 二 


后 , 除非 一 1 ZZ， …， 瑟 4 已 不 服从 形 如 B(9 一 诗 ， 9 二 去) 的 分 
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布 , 不 管 98 是 什么 ， 这 样 一 来 ， 经 过 变换 愉 =ozn 分 布 族 起 了 变 
化 , 即 在 统计 上 说 已 不 是 原来 的 问题 。 这 时 要 求 估 计量 满足 
(2.4. 全 就 显得 没有 根据 了 ， 因 为 , 原来 的 枯 计 量 9 根本 管 厅 了 这 
样 的 样本 : 按 基 来 的 分 布 族 , 样本 必 满 足 条 件 

max{m} — mintz)} <1., (2.4.4) . 


如 果 名 ow 而 o 很 大 ,样本 必 将 不 适合 (2.4. 归 。 对 这 种 样本 ， 
原来 的 估计 量 乡 的 值 可 能 根本 无 法 计算 ， 如 果 分 布 族 为 正 态 的 ， 
就 没有 这 个 问题 .这 个 要 求 总 结 起 来 就 是 说 : 经 过 变换 后 , 新 样本 
的 分 布 必 须 仍 属 于 原 分 布 族 . 

其 次 ， 损 拓 函 数 必需 满足 一 定 的 条 件 ， 设 在 上 例 中 以 
了 D7 作为 损失 函数 ， 这 时 ,如 把 测量 单位 选 得 很 大 , 真 信 
a 及 其 估计 值 9 都 将 很 小 , 办 而 损失 也 将 很 小 ， 在 这 种 情况 下 原 
先 一 个 不 好 的 估计 ， 经 过 放大 单位 ， 可 以 变 得 很 好 在 这 种 情况 
下 , 要求 亿 计量 了 满足 人 2.4.1) 就 是 得 没有 意义 。 因为 经 过 变换 
(2.4. 久 后, 损失 函数 已 起 了 变化 ， 原来 的 估计 证 ( 它 是 在 原 损失 
亢 数 下 制定 的 ) 在 这 新 损 失 函 数 下 不 一 定 还 有 优越 性 , 这 样 , 就 样 
本 omz,，…,， oz 济 言 ， 可 能 根本 不 应 当 使 用 9Cex1，…*， oz) 去 估计 
ce， 如果 将 损失 函数 取 为 (6, 9) = (4 一 )*/o?(0 一 (qo), 0, 0 
分 别 为 似 1 的 均值 和 方差 ), 就 没有 上 述 问题 ， 因 此 ， 必 须要 求 问 
题 中 的 损失 函数 满足 一 定 章 不 变性 . 

最 后 , 对 判决 空间 多 必须 提出 一 定 的 要 求 ， 在 上 语 中 , 如 对 
样本 作 变换 w= ozi， 则 不 变性 的 规定 要 求 对 估计 作 相 点 的 调整 
( 即 原来 用 估计 芯 药 话 ， 现 在 用 eyej， 判决 空间 多 必须 容许 这 一 
点 、 例 如 在 上 述 癌 题 中 ， 车 取 多 为 一 有 限 区 间 ， 则 这 一 要 求 不 能 
实现 ,而 不 变性 惨 求 @Q2.4. 作 也 就 没有 意义 了 。 

根据 对 这 个 例子 的 分 析 , 可 以 提出 下 述 一 般 的 模式 ， 

设 变换 下 的 样本 空间 为 ( 儿 ， 绍 4), GQ 为 一 个 变换 群 , 每 个 变 
换 9EG 都 是 由 骂 到 多 上 的 一 一 对 应 的 变换 。 我 们 假定 ， 每 个 
yg EG 都 是 可 测 变 换 , 即 对 任何 4E Bw 有 {2:9o€ 4}=g 14 E82. 
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设 站 的 分 布 族 为 (PEB)， 当 三 的 分 布 为 Ps 时 , 9 于 的 分 布 
由 公式 

Peg EA -PIEEg TA, NE 何 AE Beg. 
我 们 假定 , 这 个 分 布 备 属于 分 布 族 CPs, 68€9), 这 就 是 说 , 对 任何 
6 6€E6 存在 6E9, 至 

PitAd) =Pelg 'A)， 对 任何 4E 5 

我 们 把 这 个 总 记 为 88。 这 样 ,对 于 每 一 个 gE 全 ,导出 一 个 由 怠 到 
的 变换 9 一切 这 样 的 5( 由 一 切 yEQ 导出 的 ) 的 集 记 为 他 

我 们 来 证 明 :， 如 果 8 中 任意 两 个 不 同 的 站 对 应 不 同 的 分 布 ， 
即 PP 下 Po, 当 生 天 6 则 区 构成 一 个 群 ， 

首先 , 任 取 更 世 昌 ， 和 9 它们 分 别 是 由 儿 和 儿 所 导出 ， 记 
9 一 9 9 的 导出 变换 记 为 马 则 有 

PotA) = Polg tA) = PetgslgrA) 
. = Pye tg OY 
这 说 明 1 93— 1 95. 符 罚 ; 取 gs==g71， 知 
1 -二 
即 对 任何 9EG, 道 变换 5! 存在 且 仍 属于 可 ,这 附带 证 明了 每 个 
9EG 都 是 由 台 到 如 上 的 一 一 对 应 的 变换 。 其 次 ， 由 于 结合 律 的 
成 立 及 单位 元 的 存在 是 明显 的 , 证 明了 抱 是 一 个 群 . 

应 当 注 意 , 由 生 关 gs 一 般 不 能 推出 页 天 太 ， 例如 , 设 ( 和 全， 雪 。) 
一 《加 ,五 的 分 布 族 为 

{fs Ces md 

— (V3 0) "exp( — pb Jawr- ede, 0>0} 
而 如 次 B 中 一 项 正 交 变 换 所 组 成 的 群 。 这 时 ， 对 任何 yEG 及 
如 > 由 8 和 之 分 布 与 下 完全 一 样 , 这 说 明 g6=8 对 任何 5E 和 如 而 
好 只 包含 一 个 恒 等 变换 . 

对 损失 函数 工人 (9, 则 , 我们 要 求 它 具 有 以 下 的 性 质 ， 对 每 个 
9EG, 以 8 记 其 在 全 上 导出 的 变换 ， 叶 5E 他， 则 存在 由 罗 到 多 
上 的 一 一 对 应 的 可 济 变 换 g*( 即 了 DE 绢 og' 了 DE p), 致 
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L(g0, gD = (6, 由 ， 对 任何 4EB 及 GE 窗 . 
我 们 要 求 : 一 切 这 样 的 9 的 全 体 人 ,构成 一 个 群 。 所 有 议 上 的 全 
部 要 求 的 直观 背景 , 可 以 从 前 面 所 举 的 简单 例子 看 出 来 . 

定义 2.&. 上 ， 若 一 统计 判决 问题 在 某 个 将 光 变 到 肖 上身 的 一 
一 变换 群 @ 之 下 适合 上 述 一 切 条 件 ， 则 称 这 个 统计 判决 问题 在 变 
换 群 G 之 下 不 变 。 这 时 ,加 果 一 个 判决 函数 5( 四 满足 条 件 
S02) =g"8Cw)， 对 任何 wE 玫 gE (2.4.5) 
则 称 问 为 一 个 不 变 判 决 画 数 ， 这 里 久 是 由 上 面 亡 氢 述 的 方式 , 根 
据 9E 刀 所 决定 的 将 多 变 到 自身 的 一 一 变 搞 ， 在 3 为 短 机 化 药 
情况 , 《2.4 ,多 相应 地 改 为 
dtr gD) —6t5, D), 对 任何 ERR, DE DS. 
不 变性 要 求 也 可 以 这 样 去 理解 ; 把 样本 空间 鱼 中 的 点 > 医 成 
某 种 坐标 系 下 的 坐标 .变换 gs 理解 为 一 种 浴 标 变换 ， 则 (2.4. 访 
可 解释 为 : 判决 法 则 不依 闵 于 坐标 系 的 选择 . 
我 们 举 儿 个 重要 例子 . 
例 2.4.1. 设防 (gy 9 为 一 已 知 的 及 维 分 布 函 数 ， 设 商 
量 芋 二 (下 1 …， 刀 四， 这 里 忌 z， …， 束 ， 独立 出 分 布 ， 豆 :都 是 志 
维 的 ， 其 分 布 画 数 为 五 (一 外 oy Vx— Dx), = (th, ns dn), 
一 0, 5=1,…, 此, 这 时 样本 空间 为 全 = 人 :ea 和] 
EE Rt=I,，…, RR)}， 邯 可 理解 为 Rn, 98 一 Bs, 又 今 (区 澳 2) = 
(Be 亏 中 ,而 损失 菌 数 有 了 工人 (2 四 一 开 (一 四 的 形式 . 
椒 难 验证 , 在 变换 群 全 = {gsie 台 玫 导 之 下 , 这 统计 基 决 问题 不 
变 . 这 里 
34 一 加 二 下。 人 .4 的 
相应 于 如 的 , 台 上 的 一 一 变换 为 ya, 

9 = 0 +a, 

而 相应 的 多 上 的 一 一 变换 为 下， 

nd=dt+a, 
这 分 布 族 {一 冰 , 9 ER:} 中 的 参数 8 称 为 转移 参数 或 位 置 参 
数 。 在 上 述 变 换 群 下 不 变 判 决 函 数 5 上 满足 条 件 
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LC, PE 4 go) Fo 
它 称 为 转移 性 判 溉 函数 . 最 常见 的 一 个 例子 是 k=1, XL~ N09, 1). 
工 间 ,本 二 (人 直 一 内?， 常 见 的 芝 就 是 一 个 转移 性 佑 计量 . 

和 合 2.4.3. 沟 简 便 计 , 考虑 一 维 的 情况 ， 访 殖 纪 ) 为 一 已 知 的 
务 布 丽 数 ， 变 晓 二 = ( 定 0， 王 这 里 二 9 ,独立 问 和 男 
认 ， XX: 的 分 布 画 数 为 P(- 了 +), 9 ~ (0 0， 一 co<Oi<eo 
0<03<o0, 日 为 地 中 的 上 半 平 商 , 设 多 =@. 

演 虚 变换 群 = goo: 一 co<w<co, 0<h<ioo). 

多 一 
不 难看 出 ,这 个 变换 相应 手 日 中 的 变换 
Yes? = gor (2 = (二 本 500. (2.4.8) 
假定 损失 请 数 工 WW， 由 二 二 (而 ， Bz; 而 09) 满足 条 性 
LO,, Oa dy, da) -WF 2). 
而 令 Job 有 一 的 bd 一 过 和 于 本 bis), 
则 易 风 上 这 统计 问题 在 变换 群 :22.4. 站 下 不 变 乔 和 在 上 述 变换 群 下 ， 
不 变 判 决 函 数 8 一 00，pa 人 人) 为 一 切 满 中 条 什 
S11 bm tt oo, bent 0) 一 031 (oo + 
— oa 人 oo, 0<b< ooo, 
52 (Bat 0, 7 bot a) = bs (Cp, ee, wn) 
的 判决 函数 . 

在 分 布 族 | (3 全 一 62 世人 过 co, 0<po<co| 中 ， #1 利 
0s 分 别称 为 转移 (位 置 ) 参数 和 刻度 参数 .最 常见 的 例子 就 昌 
庆 ( ,8 中 的 (8, 0s)， 当然 ， 世 可 以 考 菩 只 有 刻度 参数 的 分 布 
族 | 三 ( 世 ) 0<c-<co|. 它 相应 于 变换 群 (2.4.2》 ,分布 族 {B, oj: 
0<<co}j 就 是 这 样 一 个 例子 . 


例 23.4-3 在 例 2.4.2 中 ,也 可 以 考虑 变换 群 9 ~ {g。: 一 < 
oa<ccj, 其 中 


人 4。 


at — go lt ta) = .4 
这 时 相应 的 9. 为 
gs 1 02) ~ (二 05). {2.4.10) 
即 保持 刻度 参数 不 变 。 这 一 般 是 在 上 内 涉 及 转移 参数 出 的 问题 中 . 
鲁 如 ,要 在 六 (a, o 四 中 全 评 5， 损失 丙 数 50, 四 二 下 乓 ,由 
只 要 满足 
LD,, Bo; 0) 一 本 (人 一 色 ， 0,) 
基 可 .。 相 诺 的 gs 为 
= tg, 
施加 不 变性 的 要 求 后 , 所 考虑 的 判决 沙 数 的 范围 缩小 了 . 这 
到 了 肤 在 风险 函数 上 , 有 如 下 的 结果 ， 
定理 2. 生 . 荆 、 在 上 述 记 号 焉 , 性 一 不 变 判 次 函数 的 风险 函数 
忆 忆 人 满足 条 件 ， 
= ROs, = RO, $. 


证 ,有 有 RCs, 8) 一 | 荆 (9% 5(w))dPo()， 作 变换 4 一 gy 骨 


国 了 (pa 68)) = 了 0860) = L(g0, 9°60)) 一 了 $7), 
又 注意 在 8 一 ;时 g 信 的 分 布 ， 等 于 8 和 作 时 下 的 分 布 : 公 9 的 
定义 )， 改 出 引 理 1.3.2 得 | 


Re 8) — [LCs, 3) )d Ps, (gy) 


= | Co 8())GPs (y) ~ BO 个, 证 完 . 
由 于 人 = { 丰 为 一 个 群 ，@@ 中 一 切 点 可 进行 分 类 凡是 存在 一 
个 9EG, 致 存 一 g: 的 再 点 由， 由 就 分 在 同一 类 ， 否 出 就 不 在 局 
一 类 ， 由 群 的 性 质 蔓 知 : 这 种 分 法 把 昌 的 一 切 点 分 为 一 些 现 两 无 
公共 点 的 类 。 两 个 点 负 ， gu 是 否 在 同一 类 , 全 取决 于 是 否 存在 
9E 和 名 致 如 =901， 每 一 个 这 样 的 类 称 为 -- 条 “力道 ”(orbit)， 辕 
此 定理 2.4.1 可 简 述 为 ,不 变 判 决 沙 数 的 风险 函数 在 每 条 轨道 上 
保持 不 变 , 当然 , 在 不 司 轨 道上 它 一 般 可 取 不 同 的 值 ， 在 有 些 情况 
也 此 处 的 损 兴 函数 是 针对 估计 负 的 问题 而 设 ， 
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下 , 特别 是 重要 的 例 2.4.1 和 2.4.2， 整 个 只 有 一 条 轨道 ,这 和 
性 何不 变 判 决 函 数 的 风险 商 数 为 一 常数 ， 而 最 优 的 趟 变 判 泼 就 是 
使 这 常数 达到 最 小 的 不 变 判决 函数 例 2.4.8 是 日 不 由 一 条 轨 
道 组 成 的 例子 ， 在 该 俩 中 ， 每 条 与 态 轴 平行 的 直线 fp 0 ; 
一 0 世人 0o0, 由 一 外 组 成 一 条 轨道 

根据 定理 2.4.1， 可 以 说 ， 在 使 用 不 变 判 决 时 @ 中 同一 条 轨 
道上 的 点 根本 无 法 区 别 。 从 这 一 点 看 , 也 可 以 把 使 用 不 变 判 决 看 
成 是 对 参数 空间 全 ( 即 分 布 族 (Ps, 8E 后 的 一 种 压缩 。， 由 此 可 见 ， 
这 种 作法 的 合理 性 只 能 从 只 体 问题 的 直观 背景 去 分 析 . 


(二 ) 最 优 不 变 判决 函数 的 例子 


上 段 提出 了 不 变性 的 一 般 概 念 ,并举 了 几 个 例子 来 说 明 。， 本 
段 将 考虑 几 个 简单 例子 ,其 中 最 优 不 变 佑 计 不 难 找到 这 方面 比 
较 深 入 的 结果 (主要 和 Minimax 不 变 仿 计 有 关 ) 都 嫌 过 于 专门 ,不 
宜 在 这 里 行 细 讨 论 . 

为 了 讨论 的 方便 我 们 引进 如 下 的 概念 。 因为 好 是 * 到 自 自 
的 一 个 变换 群 ，* 中 的 点 可 以 按 前 面 对 如 所作 的 方式 分 成 一 些 轨 
道 . 使 西点 my tm 属于 同一 条 轨道 上 的 充 要 条 忻 是 存在 gE 
致 YI 一 它 3， 

定义 2. 和 .3. 若 统 计 基 i(%) 在 每 条 轨道 上 保持 常数 (在 不 同 轨 
道上 当然 可 取 不 间 之 信 ), 则 +t 称 为 ( 群 人 9 下 的 ) 一 个 不 变量 。， 若 # 
为 一 不 变量 且 在 不 同 轨道 上 取 不 阅 之 值 , 则 称 # 为 一 极 大 不 变 语 ， 
显然 , 尾 一 不 变量 必 为 极 大 不 变量 的 西数 . 

例 2.4.4 考虑 例 2.4.8 的 情况 ,其 中 i~(a, oa 想 找 5& 
的 最 优 不 变 居 计 . 损 兴 函数 取 为 

Lla, o, 二 一 和 Ko (a— 人 DY, 0<NMg) 一 co 
现 设 5(w2) 为 任 一 不 变 悄 计 ;因为 5 显然 是 一 个 不 变 估计 , 8 {2) 一 和 
为 一 不 变量 不 难看 出 ， 在 变换 群 从 .4.9) 之 下 ， 极 大 不 灾 量 为 
《oo 一 2 一 操 ) 。 所 以 ,5() 必 有 
B82) t+ hg — ta ap 一 2 (2.4,11) 

， sl66" 


的 形式 ， 国定 go=ao， 在 分 布 族 { 邓 (&, go 六， 一 oo <4<o0} 中 , 芝 
为 完全 充分 统计 量 ， 而 因 参 数 空间 (在 ro 周 定 时 ) 只 有 一 条 机 
道 ，( 下 一 站 4， …， 下 一 攻 小 的 分布 与 4 无关， 这 样 , 很 据 定理 
1.6.3，( 瑟 下 站, 一下) 与 豆 独 立 ， 册 于 co 的 任意 性 ， 
知 对 任何 {6, 0 中 ， 置 与 (一 尺 1，…-， 是 ,一 六 小 独立。 因此 ， 
《2.4.11) 右边 两 项 独立 , 从 而 得 到 
Rlg, o; 人 = {Bo (FT—0+ Ho Lh YN. 

天 热 , 当 且 仅 当 及 一 0, 即 5( 及 ) ~ 于 时, 此 式 达 到 最 小 值 。 这 说 明 
在 变换 群 人 .4.9) 之 下 , 卫 为 a 的 最 优 不 变 估 计 . 

由 此 我 们 看 到 判决 函数 理论 所 带 来 的 一 个 有 实际 意义 的 铺 
论 ， 在 初等 统计 中 就 省 诉 我 们 , 在 正 檀 总 体 下 , 用 样本 均值 估计 总 
体 均值 是 一 个 良好 的 估计 ,但 在 那里 提出 的 理由 不 完全 令 人 信服 ， 
现在 我 们 认 明 了; 在 无 偏方 差 最 小 、Minimax 和 不 变性 等 原则 下 ， 
至 对 估计 正 态 分 布 均值 都 有 最 优 性 . 这 些 福 质 反 映 互 确 是 一 个 
良好 的 估计 量 ( 当 总 体 分 布 为 正 态 时 ). . 

例 2:4.5. 现在 考虑 例 3.4.2 中 的 变换 群 ， 我 们 设 至 为 
必 (o, 圈 的 分 布 函数 ， 则 克 (w o 轨 的 分 布 通 数 为 如 (2 和 )、 设 


丰 一 (下 1 奋 则 ， 宇 1 让 为 in， 样本 ， 工 1 一 丰 人 虽 ， 
变换 群 为 (2.4.7)、 我 们 要 居 计 a， 因 李 到 损失 隧 数 


了 (oo D- 0-dYo (1-4). (2.4.12) 


这 时 不 变 估计 5 应 满足 要 求 
3 十 Ge Bost = bg rs mn, .4.18) 


设 8( 为 任 一 不 变 估计 ， 令 8 一 ( 宫 (o 一 司 ”) ， 则 3(w)/8 为 一 


不 变量 , 故 为 极 大 不 变量 ( 记 为 六” 的 函数 ， 设 /5 一 y0 中 , 则 5~ 
了 例如 , 取 


(不 全 相同 此 处 
t= {Ls —minte, =°, sn) /Tmax tm ~ mn) 
—minto, + Zn}], 
OO, Wh 0 当 本 尝 欧 一 光一 和 


一 tr sp TH 


站 BT 。 


Sa 人 信 ， 因 为 在 本 题 的 变换 和 群 之 下 ， 参 数 空 间 中 只 有 一 条 轨道 ,这 
说 明 + 的 分 布 与 参数 无 关 ， 由 于 (到 ,89?) 为 洁 全 充分 统计 无 ， 由 
定理 1.6.8 知 了 与 ( 王 ，B?) 独立 ， 因 丽 g 的 与 8 独立， 利用 这 一 
点 我 们 首先 证 明 : 汶 了 使 佑 计量 8 一 9 9))8 的 风险 达到 最 
小 ,9 人 必须 等 于 一 常数 

事实 上 , 记 瑟 (gyQ( 革 )) =e (注意 5 与 参数 无关 )， 因 为 


Ra, cy 8) ~ 方 Bo slg RNIN a’, 


而 ?7 非 负 , 除 非 e 有 限 , 将 有 RCw, cr 及 一 ce。 故 可 设 e 有限. 由 
于 (对 任何 参数 值 ) 
AC A (Eg) AACS Ce 
易 见 对 任何 ka ai 有 
EsatoS— oe Bala tT HS— oo. 
日 等 号 当 生 仅 当 4g 以 概率 1 等 于 ¢ 旱 成立， 这 说 明 ; 我 们 只 党 在 
形 如 63 的 估计 景 中 央 找 风险 最 小 的 , 5 为 常数 但 由 十 STI~ 
6 La . ~ (2.4.14) 
ZTC) 
时 ， 万.o 09 一 o)? 达到 最 小 (详细 计算 人 留 给 读者 }。 因此 得 出 ， 信 
计划 


基 5 的 最 优 不 变 估 计 . 
应 用 类似 的 方法 术 难 证 明 , 若 问 题 是 同时 估计 = 和 wo, 而 取 损 
失 陶 数 有 
L(g, a; 四， 0) 一 4 C+ BE (2.4,15) 
则 人 6 5) 的 最 优 不 变 佑 计 为 
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1 
(* 六 六 N32 本 | (2.4.16) 
村 | . 
在 例 2.3.7 中 , 我 们 指出 用 Bayes 估计 法 可 证 明 它 是 Minimax 个 
计 , 现在 又 证 明了 它 是 最 优 林 变 佑 计 , 这 个 事实 并 非 偶 然 的 巧合 . 
例 2.4.6. (Pitman 估计 )， 考 虚 例 2.4.1, 我 们 想 在 平方 损 
失 下 求 # 的 晤 优 不 变 合计， 为 简单 计 , 讨论 =I 的 情况 ， 一般 
的 处理 方 法 完全 交 似 , 
| 设 五 ， …，, 王 "为 jd. 样本 ,于 | 有 密度 (对 工 测度 ) 大 (zz 一 及， 
其 中 总 基 一 已 知 的 密度 孙 数 .损失 函数 定 为 上 (9, 克 一 雪 一 四 
我 们 假定 | .23 Godz<ec， 
在 例 2.4.4 中 已 指出 , 9 的 任 一 不 变 佑 计 86) 等 于 任 一 特定 
的 不 变 知 计 Sa kw) 《在 读 生 中 到 为 故 )， 堆 上 一 个 形 如 户 ( 人 4 一 六 1 
让 4 一 卫 1) 的 不 变量 ,这 里 我 们 取 训 (8) =21 这 显然 是 一 个 不 
变 倘 计 ， 因 此 Bf 一 到 十 下 (ca 一 好 …， 一生) ;其 风险 函数 为 
RO, = Ef(X—0+h(Ra Ry, ,Ts Xl? 
-Ee hos tm, 1; on) (0) 
sf ma) pd 
.EE 
一 吾 o{ 盏 o[( 了 3 十 ( 瑟 3 一 全 一 习 0)) 引 瑟 3 
一 互 :1， wy 一 下 1 
显 热 , 枉 记 9 一 福 1,…, 及 ,一 站 1 给 定时 , 案 达 式 
五 p[《 吾 1 十 页 (下 2 下 1 | Ts 
一 下 1，…， 互 一 吾 订 


下 ( 交 3 一 下 4， ， 瑟 ,一 习作 
~- — Bo(lRi| Xo Fy, 1 Ra— HY) 2.4.17) 
时 达到 最 小 ， 因 此 
B08) 一 玉 1 一 玉 Bo( 信 1 芒 1 一 了 1 一) (0,4.18) 


= 169 。 


为 平方 损 类 下 8 约 最 优 不 变 佑 计 .。 这 是 Pitman 在 1939 年 提出 
来 的 , 因此 常 称 为 Pitman 估计. 
不 难 算出 (2.4.17) 的 具体 形式 : 作 变 换 
了 + 一 下 1 了 一 丰 ( 一 下 1 2 二 22， + 
则 在 8=0 之 下 ，CFi， 了 a …'， 了 中 的 密度 为 DF 十 Y 
fi 十 yn) ， 因 此 在 给 定 ( 了 5 了) = (oa Yr 时, 了: 的 条 
任 密 上 诬 为 


fdF tg) uty) /fF YF Yt ys) 


“fst Yn) Gy, 
由 此 算出 BolY' |ys, “yg Yn) » 换 回 到 Ea 得 
Bot Kil sys — 1, ~ Fn — P14) 
[OF GF te 
[FOF E+) te eds 
这 样 , 代入 局 .4.18)， 得 到 Pitman 知 计 的 具体 形式 ， 
S09) 一 So 
[DFE m0) Gem) 
FOF Fo) to) de 
(2.4.1% 


在 包含 位 置 和 刻度 参数 的 俩 3.4.2 中 ， 也 可 写 出 类 似 的 但 更 
为 复杂 的 表达 式 . 


(三 ) 不 变 原理 

陈 了 若干 不 足 道 的 情况 以 外 ， 不 变 判决 函数 类 并 不 构成 本 质 
完全 类 ， 拿 例 2.4,4 来 说 , 最 优 不 变 估计 为 也, 其 风险 函数 为 
志和 (9)o3， 在 日 中 每 一 点 都 大 于 0, 但 很 容易 造 出 一 个 ( 非 不 并 
的 ) 信 计 , 在 日 中 指定 的 点 上 风险 为 0， : 


+ 了 7D > 


ee 
- om 


但 是 , 如 果 只 着 限于 sup 及 人 8, 引 ， 则 在 很 广 的 条 件 下 可 以 证 


明 : 局 和 限于 不 变 佑 计 类 不 会 带 来 不 利 。 换 句 话说， 在 很 广 的 条 件 
下 可 以 证 明 ,不 变 的 Minimax 判决 函数 存在 ， 所 有 属于 这 种 性 质 
的 命题 统称 为 不 变 原 理 . 

事实 上 , 在 前 面 我 们 已 几 次 接 谭 到 不 变 原 理 的 例子 ， 例 如 , 例 
2.8.6 证 明 ， 车 下 :，，…， 四 , 交 iid.， 轩 ,心计 (8, 1)， 损失 函数 为 
IL(, 四 ~ 四 一 友 ”， 则 于 为 8 的 Minimax 人 策 计 、 而 这 个 估计 在 
平移 变换 群 下 是 不 变 的 ， 例 3.3.7 证明 , 车 站 …-， 了 节 ， 为 iid.， 
下 :~ 入 (a, go, 损失 函数 为 (8, 四 一 (一 办 og3, 则 们 为 6 的 
Minimax 个 计 ， 它 也 是 在 平移 群 下 不 变 ， 例 2.3.8 也 属于 不 变 原 
理 的 范围 ， 因 为 容易 验证 ;在 该 何 中 落 在 样本 空间 中 引进 变换 群 
Go {gas}: 

goes (m1 oo, Rn) = to Bh 7 nt ot Blin), 
(2,4.20) 
再 估计 6, 檀 的 问题 在 变 搞 群 寻 之 下 不 变 ， 且 我 们 在 该 便 中 求 出 
的 Minimaz 估计 人 .3.483) 是 不 变 佑 计 . 

在 点 估计 领域 中 ， 关 于 转移 和 和 刘 度 参数 的 估计 的 不 变 原理 问 
题 受 到 不 少 的 注意 , 首先 , 对 例 2.4.6 中 的 Pitman 估计 ，GHirshieok 
和 Savage 在 1951 年 证 明了 : 在 平方 损失 下 它 是 平移 群 下 的 
Minimax 悄 计 、 后 来 本 书 作 者 将 其 推广 到 多 维和 一 般 转 移 型 损 
失 函 数 《 即 形 如 工 @8， 起 一 五 @ 一 加 的 损失 函数 ) 的 情况 ， 以 及 转 
移 和 刻度 参数 同时 存在 的 情况 其 中 包括 了 前 面 指出 的 结果 ; 在 
损失 画 数 他 .4.16) 之 下， 但 .4.16) 是 六 (wa 人 中 的 人 @ 中 的 
Minimaxz 悄 计 , 这 其 至 在 序 顺 依 计 类 中 也 成 立 。 1957 年 , KKiefer 
在 很 一 般 的 形式 下 讨论 了 不 变 原理 的 问题 , 他 证 明了 : 在 很 广 的 条 
忻 下 ,局 良 于 不 变 傅 计 丰 会合 sap 召 3) 增 大 ,但 要 证 明 Minimax 
存在 及 其 可 测 性 , 则 还 需 有 补充 的 条 件 . 

关于 这 个 问题 我 们 就 局 限于 上 述 很 粗略 的 介绍 ， 因 为 其 中 性 
何 一 个 重要 结果 的 证 骨 都 很 长 , 不 适 于 在 此 作 纸 致 的 讨论 ， 


s Tl 


(四) 可 容许 性 的 概念 


当 我 们 使 用 某 个 判决 函数 和 时 ， 有 一 个 条 件 是 我 们 希望 8 必 
需 满足 的 , 即 不 存在 另 一 个 判决 函数 3*， 致 

RO, 6) RO, HW 对 一 切 GE€0Q, (2.4.21) 
且 不 等 号 至 少 对 一 个 8E 昌 成 立 .， 因 为 不 然 的 话 ， 我 们 就 宁愿 使 
用 ， 满 足 这 个 条 件 的 判 关 画 数 5 称 为 可 容许 的 ， 

定义 2.4.3. 设 8 为 一 判决 函数 ， 若 不 存在 另 一 判决 函数 痛 
致 人 .4.2 了 1) 成 立 且 不 等 号 谭 少 对 一 个 9E@ 成 立 ， 则 称 8 为 可 容 
许 判 决 函数 . 

在 估计 蛋 论 中 ， 估 计量 的 可 穿 许 性 问题 受到 很 大 的 注意 ， 在 
这 里 ,我 们 只 能 举 若 于 例子 说 明 这 个 概念 , 并 介绍 某 些 较 初等 的 工 
作 , 详尽 的 候 述 属于 专著 的 范围. 

例 2.4.7. 例 2.3.2 中 求 得 的 估计 量 人 .3.24) 是 可 容许 悄 计 
《对 任何 e>0, 58 站. 因为 , 任 一 估计 量 te) 的 风险 函数 RC9, 0) 
为 8 的 连续 函数 ( 避 实 上 , RCOO, g") 是 8 的 多 项 式 )， 因此, 若 加 。 
不 为 可 容许， 将 存在 下 可 (0, gn 所 RC6, Gs)， 且 对 某 个 妈 有 
民 (4o, 9") < 五 (go， gwv)。 由 连续 性 ， 这 不 等 式 在 如 的 充分 小 的 邻 
域内 成 立 ,而 这 将 导致 

| Be got < Gr) dé 0). 
这 时 &o 为 9 的 先 验 分 布 @@.3.22)， 这 显然 与 如 为 先 验 分 布 去 
之 下 , 8 的 Minimax 情 计 了 矛盾， 

根据 完全 同样 的 推理 可 以 证 明 ， 在 例 3.3.3 中 得 出 的 估计 景 
人 .3.29) 是 9 的 可 容许 估计 ， 对 任何 友 >0， 但 用 这 个 方法 不 能 证 
明仁 的 可 容许 性 ,尽管 及 是 (2.3.29) 中 的 各 tw) 当 所 >oo 时 的 极 
限 . 

但 是 ， 也 存在 着 这 样 的 情况 ， 其 中 常见 的 估计 量 不 是 可 容许 
的 ， 

鲍 2.4.8. 设 环 下， 为 jid， 瑟 1 到 人 十， 但 参数 空 

iia. 


闻 限 制 为 四 一 8: 191<2}, 损失 画 数 为 上 (6, 四 一 一 只?。 容 易 
看 出 ; 常见 的 估计 到 是 不 可 和 容许 的 ,因为 , 若 令 


9 2 当 辟 >% 


一 9， 当 吾 二 一 2. 

则 县 然 有 五 人 9, g*) 二 (0, 下) 对 任何 9E， 另 一 个 更 有 趣 的 创 
子 如 于. 

俩 2.4.9, 设 忆 :，…， 豆 。 为 ii NN (a on, 0= (6, oo, 
要 估计 o?, 损失 函数 为 工 (02, 9 = (a? 一 d3)2/at， 我 们 知道 ， 常 
用 的 估计 | 

be 仿 一 1 zB)» 
Wo 的 MVYUE， 但 它 是 不 可 和 容许 的 ; 为 了 证 朋 , 考虑 形 如 o8? 的 
估计 ，oe 为 等 定常 数 。 易 见 
Eal(oS?—oD /ot = 2 10 GC— To” 


其 景 小 值 在 o~ 二 于 T 达到 ， 人 计量 名 和 字 二 于 分 的 风险 分 草 
为 二 及 于， 是 然后 者 为 小. 
但 是 , 即使 估计 人 CE, 一” 也 是 不 可 容许 的 ， 可 


以 证 明 , 估计 量 
9 (0) -min| LT Se 区 3 7 (2.4.22) 


一 至 地 优 于 它 ， 这 是 Stein 证 明 前 一 个 结 梁 ， 下 面 著名 的 例子 也 
属于 Btein. 

例 2.4.10， 设 下 。…， ,为 iid 样本 , XY1 服从 维 正春 分 
布 坟 (9, I, 要 情 计 ,损失 函数 为 (9, 四 ~19 一 dl?， 通 常 的 全 
计量 是 时 -二 思 并 但 是 Stein 证 明 , 当 4>8 时 ,这 个 全 计 重 
是 不 可 容许 的 ; 估计 量 
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0 人 -信和 ) 王 (2.4.39) 


一 致 地 优 于 (在 寺 述 损失 函数 下 ) 有 ， 具 个 计算 过 程 不 在 此 写 出 
了 . 

本 例 中 的 佑 计量 嫩 是 无 偏 估计 中 YAR 最 小 的 估计 量 ， 也 是 
最 优 不 变 估计 (在 平移 变换 群 下 ) 和 Minimax 合计 。 因此 , 这 个 
例子 告诉 我 们 ,不 可 把 一 种 最 优 标 准 绝对 化 . 也 应当 注意 ， 象 
局. 和 .22)， 忆 .4.28) 这 种 估计， 目前 也 没有 在 应 用 问题 中 蓉 遍 使 
用 ， 这 除了 由 于 习惯 的 原因 四, 还 应 当 了 解 , 这 些 佑 计 的 优越 性 是 
与 一 定 损失 函数 联系 在 一 起 的 ， 不 能 认为 这 种 损失 函数 一 定 答 合 
问题 的 实际 。 因 此 人 和 们 宁肯 使 用 直观 上 看 来 简单 明了 的 估计 基 
2? 和 卫 ， 而 不 苦 使 用 较为 复杂 的 估计 量 (2.4,22) 和 (2.4.23)， 


{五 》 平 方 损失 下 指数 族 均 慎 的 可 容许 估计 


在 指数 分 布 族 之 下 , CO-B 不 等 式 成 立 。1951 年 ,Girshick 和 
Savage 利 朋 这 个 工具 处 理 了 在 平方 损失 下 ， 自 然 参 数 空 间 为 
《一 co，cc) 有 时， 指数 族 的 均值 的 某 种 估计 的 可 容许 性，1958 年 
Karlin 考 虚 了 自然 参数 空间 不 为 全 直线 的 情况 ( 见 4nm. Ma 衣 . 
Statist., 1958, p. 406)， 1961 年 Katz 又 研究 了 将 从 数值 局 限于 
自然 参数 空间 的 一 段 的 情形 Cdnn. Math. Statist., 1961, p. 1861 ， 
这 些 结 果 证 明了 在 平方 损失 下 许多 常见 估计 的 可 容许 性 ， 胃 而 有 
重要 意义 这 里 我 们 叙述 并 证 明 Earlin 的 主要 结果 ， 它 包含 了 
Girshick 和 和 SaYage 的 结果 . 

设 二 1 …， 守 ws 汐 从 一 维 指数 分 布 族 中 抽出 的 记 . 样本 ， 则 
如 前 面 多 次 指出 的 ， 斑 1 十 … 十 革 。 为 完全 完 分 统计 量 且 其 分 布 仍 
为 指数 族 . 因此, 可 以 不 失 普遍 性 地 取样 本 大 小 为 1 ， 这样, 设 下 
的 分 布 为 指数 族 

CD ed), add)}. 

(a, 站 为 自然 参数 空间 的 内 点 集 , 4 可 以 为 一 c0， 台 可 以 为 oo. 

我 们 提醒 几 点 王 面 要 用 到 的 事实 ， 记 w( 胃 = 加 ( 了 ), 则 由 

二。 


8 1 2， mo 三 一 人 [的 CT， 且 
oD = Vare( X) = 0. 


了 到 log 0 (fe 一 ]og CT 的 十 日 工 ， 
其 对 六 的 导数 为 

OM ONS Edt), 
所 以 Es[ (G10g (OC (0 6) /60 1 = 0. 


设 6( 也 ) 为 一 统计 量 ， Be [QL 了 )1 对 任 柯 6€ (ww 国 存 在 有 限 。 记 
sd) 一 0) 一 bal 站， 则 由 -RB 不 等 式 
Eo[(d(X) m0) T= 十 Vars[B( 二 7 


> 机 (全 二 十 aa( 的 ]2. (2.4.24) 


有 了 这 些 准备 , 可 以 证 明 Karlin 的 定理 . 
定理 2.4.1(KEarliny， 在 上 述 记 号 下 ， 为 要 估计 of) ~ 
再 (他 )， 取 损失 一 数 
LO, Dm Id -wl, 
此 处 说 (全 >>0 于 (ee, 从 上 (我 们 注意 : 对 容许 性 问题, m( 外 不 起 
任何 作用 )， 如 有 果 存 在 名 E (a, 区 及 常数 大 一 工 和 常数 六 至 
sim 信 0 omy oy eo, 
2 (2.4.25) 
中 了 oorearn 
册 go( 下 ) = ( 开 十 队 ) /+4 和) 为 在 上 述 损 失 函 数 之 下 , w( 四 的 可 
容许 估计 . 
证 . 设 do( 莹 ) 不 为 可 容许 ， 则 存在 估计 (了 X) 一 至 地 优 于 
do( 攻 )。 显然 吾 [而 (及 站] 存在 有 限 、 由 <2.4.24) 
OD (从) 


TR oD + C0) —D) 
守 思 [di( 广 ) 一 (0) 之 用 (6) 


十 [Bb 0 + oD 1 


一 一 一 : 1 一 
下 


em 


易 见 54,(0) = 如 LCdo( 芝 )] 一 ob 一 一 4 站 庆 [mC0) 一 可， 故 车 令 


g(0) = ba (0) — B,C0) ~ da (0) + T+ (0) — 且 ， 


可 得 
和 2 1 200) ft | 
bo -二 oO ~] + [+ 0) | 
1 [oargy EN 
TN 《的 tA) CA. 
此 式 经 过 初等 简化 , 易 得 / 
gC0) + [9 0) —h(w0) ~ hg(0)] 
一 区] 
<—- 4 <0, 


再 令 T(D) 一 中 (的 ewgt 四 ， 则 可 将 上 式 写 为 


一 2 — ad Fa ry 2 1 Ee 
OO) ™ 0) + TO) <0. 


为 确定 计 设 和 > 一 1 一 1 的 情况 完全 类 侧 )， 则 由 .上 式 可 知 
站 (的 SO 于 (人 有， 好 工 (全 在 人 们 于 非 壤 ， 故 存在 人 Eap， 
鸽 在 彤 <D<5 时 下 四 或 者 恒 为 上 或 得 不 为 0， 车 法 后 者 ,出 
逮 1 Ty TA _ ; 
闸 厅 | -了 > 《Be 8 0 0 bo. 
1 1 1 站 x 
TO TO | “WoW dy > 00. 
出 此 可 知 lim 1 (6) 一 0。， 同 理 证 明 li I (0 一 0, 稍 由 了 (从 的 非 增 


性 知 了 (人 D 二 0 于 (gq 四 ,因而 y(==0 于 (g, 的 ， 训 有 BQ ( 玉 ) 一 
do《 卫 )] 一 Ba,(9) 一 ba,(9) =g() 二 0 于 (@, 荔 . 由 指数 族 的 完全 性 ， 
知 do( 入 ) 一 中 ( 玉 )a.6.6, 因而 出 (下 ) 不 能 一 致 地 优 于 G6 (于 ). 这 
就 完成 了 定理 的 证 明 . 

如 果 f@, 信 一 (一 o0, co)， 则 显然 =4=0 满足 条 件 (2.4.25)， 
于 是 得 到 ; 


二 了 人 各 


系 2.4.1， 省 指 数 族 {Oe*dp (zw)} 的 自然 参数 空间 为 
(一 o0，o0), 则 在 平方 损失 之 下 , (也 ) 为 Bo( 于 ) 的 可 容许 估计 . 
这 就 是 Girshiok 和 Savago 在 1951 年 得 出 的 结果 ， 由 此 可 
得 到 另 一 个 有 用 的 推论 . 
系 2.4.2. 在 系 2.4.1 的 条 件 下 , 若 取 损失 函数 
LO, @) ~ [oC0) —a]*/o*(0), 
则 下 为 a(@) 一 BB,(Z) 的 Minimax 售 计 . 
证 明显 然 , 留 给 读者 自己 补 出 (见习 题 31 提示 ). 
例 2.4. 入 没有:，…， 芳 为 自 玉 (9, 二 中 抽出 的 iid. 样本 ， 
(X31 …， 开 由 的 密度 有 指数 族 的 形状 : 
了 (oa， “yy fin, 及 
= er hy, Sy vn) ， — co o0, 
由 定理 2.4.1 知 ， 在 平方 损失 (m9 一 由 ?之 下 , n 久 为 m6 的 可 容许 
估计 ， 因而 互 为 a 的 可 容许 估计 ， 由 于 Vars{nT) = 与 a 无 关 ， 
由 系 2.4.1 知 , 在 同一 损失 函数 下 ,不 为 9 的 Minimax 估计 . 
重 2.4.12. 设 互 ~ Bo 办 ;, 0<P<1l, (对 集 {0, 二 …, 对 
的 计数 测度 内 有 密度 
名 gs 1 
ap"oxp[(1og 2)*]( ， ) 0 (0)s ( , ) 
这 里 9 ~log 了 全， 因为 0<p<<I， 有 一 oo0 过 6 之 co, 礁 定 更 2.4.1 
的 条 件 适合 ， 因 此 在 平方 损失 下 , 之 为 (及 ) mp 的 可 容许 估 
计 ， 或 者 说 , 艺 在 损失 (一 ?之 下 ， 为 p 的 可 容许 估计 ， 又 
Vars ( 寺 )- 2 人 一世 ， 故 由 系 2.4.1 知 ,在 损失 函数 
Lep, od) ~ (p—D’/[p(1—D] 
之 下 , 全 为 了 的 Minimax 估计 ， 在 例 2.3.5 中 我 们 已 指出 , 在 损 
类 浮 数 久 一 中? 之 下 ，p 的 Minimax 合计 是 (2.8.27), 与 党 不同, 
因此 看 出 : 一 个 估计 是 知 符 合 某 种 最 优 性 标准 , 与 损失 函数 的 取 法 
二 7 全 二 


有 关 . 

另外 一 些 可 出 本 定理 处 理 的 常 匈 估计, 留 给 读者 作为 习题 . 

可 和 容许 性 的 问题 是 参数 估计 中 讨论 得 很 多 也 是 很 困难 的 问题 
之 一 。 其 困难 在 于 缺乏 一 般 性 的 有 效 的 处 理 方 法 从 本 书 35.4 
中 关于 线性 模型 中 的 线性 估计 的 可 容许 性 问题 的 讨论 可 以 看 出 这 
一 点 。 除 了 指数 族 以 外 ,关于 了 itman 估计 ( 例 3.4.6) 的 可 容许 性 
间 题 , 也 有 较 好 的 结果 .主要 是 Btein 和 James 作出 的 , 他 们 证 明 
了 当 参 数 个 数 不 超 过 2 时 ， Pitman 估计 在 平方 损失 于是 可 容许 
的 (Stein, Ann. Math. Slatiist,, 1959, p, 70, James 和 Siein, 
Proc. Fourth Berkeley Sump. Math. Statiat. 1. Prob. 2,1960, p. 
36), 而 当 参 数 个 数 超过 2 时 ,出 不 必 是 可 容许 的 ， 后 一 事实 已 在 
例 2.4.10 中 指出 过 了 ， 近 年 来 受到 注音 的 另 一 个 问题 是 关于 多 
维 正 态 分 布 的 均值 在 二 次 于 损失 之 下 的 Minimaz 可 容许 估计 的 
问题 .在 俩 2.4.10 中 , 尽 是 Minimax 估计, 但 不 是 可 容许 的 , 


$2.5. 大 样本 理论 的 基本 概念 


到 目前 为 止 ， 我 们 都 是 在 统计 判决 理论 的 思想 之 下 来 处 理 点 
估计 问题 . 其 主要 特点 是 把 点 估计 问题 提成 在 一 定 准 则 下 求 最 优 
解 的 问题 ， 点 估计 理论 的 另 一 个 重要 方面 ， 而 且 在 历史 上 说 也 是 
发 展 较 晶 的 一 个 方面 , 就 是 点 估计 的 大 样本 理论 。 即 在 样本 大 小 
无 限 增加 时 ， 和 估计 量 可 能 具有 的 人 性质. 我们 先 通过 一 个 简单 例子 
来 说 明 有 关 的 概念 . 

例如 ,假定 ,多 为 方差 有 限 的 一 维 分 布 训 ， 讼 瑟 :，…， 鞋 ,为 
自 这 分 布 族 中 某 个 未 知 分 布下 中 抽出 的 训 . 样 本 要 估计 吾 的 
均值 8 下 .我 们 用 王 ，…， 互 ,的 样本 均值 豆 。 来 估计 日 (PP 
从 锋 率 论 知 道 ， 当 样本 大 小 和 无 限 增加 时 ， 估 计量 吾 ,p 有 以 下 的 
性 质 : 

。 思 实 际 上 , 这 里 水 及 一 昌 估 计量 了 Ys, …, 但 习 祯 上 常 以 一 个 代表 性 记 号 (如 
此 姓 的 脏 太 来 记 它 。 
a 1B" 


i， 至, 依 概率 收敛 于 被 估计 的 8(F)。 这 表示 ， 只 要 样本 大 
小 足够 大 ,估计 量 可 以 用 随意 接近 于 1 的 概率 把 8) 估计 得 为 凯 
欲 为 的 精度 ， 这 个 性 质 叫 合计 量 的 相合 性 (Consisteney) . 

2. 车 五 的 方差 不 为 0( 我 们 已 假定 了 了 前方 差距 <eo)， 则 
由 中 心 极限 定理 , 有 

Vn TOF)) > NO0, 1)， 当 mm 一 ce， 
TF 
记号 对 二 > 表示 依 分 布 收 敛 ， 这 个 性 质 叫 做 于 的 源 近 正 态 性 . 
由 这 个 性 质 , 当 n 很 大 时 , 我 们 可 以 近似 地 计算 出 宣 。 落 在 被 估计 
值 9CB7) 某 个 范围 内 的 概 率 有 多 大 (当然 , 为 此 还 贪 对 ar 作 一 定 的 
估计 》， 

这 些 就 是 最 基本 的 大 样本 性 质 ， 总 之 , 所 谓 估 计量 的 大 样本 
性 质 ， 是 指 当 样 本 大 小 无 限 增加 时 与 沪 估 计量 的 分 布 有 关 的 种 种 
极限 性 质 ， 不 言 而 喻 , 这 不 仅 取决 于 估计 量 的 形式 , 也 与 总 体 的 分 
布 有 很 大 的 关系 ， 

大 样本 理论 的 重要 性 主要 在 于 , 第 一 , 归根 到 底 , 要 彻底 弄 清 
一 个 估计 量 的 性 质 , 必须 知道 它 的 分 布 ， 在 样本 大 小 加 定时 , 这 只 
在 很 少 的 情况 下 能 做 到 ， 伍 当 样 本 大 小 无 限 谱 加 时 , 估计 量 的 分 
布 往往 趋向 于 一 个 常见 的 简单 分 布 , 如 正 态 分 布 之 类 这 至 少 在 
样本 大 小 很 大 时 为 我 们 了 解 估计 量 的 全 面 性 质 提 人 殿 了 依据 ， 其 
次 ， 在 样本 大 小 国定 时 ， 寻 求 具 有 某 种 最 优 性 的 估计 量 是 不 容易 
的 , 其 存在 性 也 未 必 能 保证 .这 时 ， 从 大 样本 理论 的 角度 车 跟 , 为 
研究 种 种 估计 量 的 性 质 提供 了 一 个 途径 . 

在 历史 上 说 , 估计 方法 中 最 广泛 使 用 的 是 两 类 估计 ; 手 佑 计 和 
极 太 似 然 估计 ( 见 下 节 )， 它 们 的 还 论 发 展 主要 在 大 样本 方面 . 

由 于 大 样本 理论 是 研究 当 样 本 大 小 无 限 增加 时 估计 量 的 性 
质 ， 我 们 再 不 能 把 祥 本 就 记 为 w%。， 一 般 ， 假定 有 一 个 分 布 族 
(Fo 8G 命 ， 思 可 以 是 一 维 分 布 , 也 可 以 是 老 维 的 ， 设 也 !， 子 s， 
.…， 立 。 为 独立 周 分布， 了 ;的 分 布 函数 了 在 上 述 分 布 族 中 ， 在 
讨论 中 样本 大 小 “可 以 无 限 增加 。 当 我 们 说 到 某 个 估计 量 8 或 


二 二 7 各。 


全 了 4 玉 ) 时 ,实际 我 们 指 的 是 一 上 吊 信 计 GCX1)， (Zi 王 人 
天 了 ， 卫 s， 玉 9) ，，…， 以 下 我 们 总 用 这 样 的 记 法 ， 

自 焉 十 年 代 以 来 ,大 样本 理论 有 了 很 大 的 进展 , 主要 是 关于 渐 
近 有 效 估计 及 极 天 似 然 信 计 等 方面 。 本 书 为 短 幅 和 性 质 所 腿 , 只 
能 介绍 其 中 若干 基本 概念 ， 进 一 步 的 细节 应 阅读 专著 和 文献 ， 


《一 ) 佑 计量 的 相合 性 


定义 2.5.1， 设 9 芝 1…, 玉 n) 为 gy( 的 的 全 计量 ,车 当 >o0 
讨 ， 对 任何 8E@ 98CITI，…， 下 中 恢 概 率 收 敏 于 g(6)， 则 称 5 为 
9 分 的 相合 估计 ， 
依 定义 , 站 为 8( 久 的 相合 估计 是 指 对 任 给 sg>0， 
Hm Po({g (X31, …， EO) gO 0) 0 2.5.1) 


如 果 对 任 给 a>0 上 述 收 人 敏 性 对 86EB 是 一 致 的 ， 则 了 可 以 叫做 
?( 信 的 一 致 相 合 估 计 . 

由 .5. 世 定义 的 相合 性 有 时 称 为 弱 相 合 性 (Weak 
consisteno7)， 以 与 所 谓 强 相合 性 (Sirong soonsistenoy) 对 照 、 后 
者 是 指 

Po im CF1, …, Fe) ~g(0)) =~1, 对 任何 9€@. 


(9.56. 
由 概率 论 知 , 孝 引 有 强 相合 性 , 必 有 弱 相 全 性 . 

从 大 样本 理论 的 观点 说 ， 相 合 人 性 是 对 一 个 估计 量 最 起 码 的 要 
求 ， 这 个 要 求 也 是 最 等 易 浦 足 的 一 个 要 求 。 这 主要 是 由 于 犯 率 论 
中 的 天 数 定律 ， 然而 , 我 们 会 有 机 会 看 到 , 在 一 些 情况 下 证 明 一 个 
佑 计 的 相合 性 并 不 容易 , 而 且 , 用 常见 方法 造 出 的 佑 计 莉 也 可 以 没 
有 相合 往 . 

我 们 注意 : 在 上 述 相合 性 定义 中 , 并 没有 必要 要 求 素 ， 生 。…。 
为 独立 问 分 布 的 ， 

忠于 党 见 前 相合 估计 例子 多 属于 所 谓 “ 抑 估计 ”的 范围 ， 而 以 
后 我 们 将 证 明 关于 矩 估 计 相 合 性 的 一 般 定 到 ， 记 以 在 这 里 不 去 列 
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举 这 些 其 体例 子 . 
关于 相合 性 有 下 面 的 简单 定理 . 
定理 2.5.1， 设 让 (下 四， 天 一 1 … Dp 分 别 为 gx( 仿 ， 
一 1，…, 了 的 相合 估计 ， 人 必定 函数 op 人 az， …， 加) 满足 如 下 的 条 
件 ; 
1. 对 任何 ms 及 2 ap (页 (0 Cm 1 on) ) 
落 在 2 的 定义 域内 ; 对 任何 8E 昌 ，(gu 四， …， gp 四 ) 落 在 g 的 定 
义 域内 ， 
3， 对 任何 26E@B 函数 名 在 戌 (gi( 办 ，…, gy (办) 处 连续 ， 
Wg GFE2, ,RR ) 为 pO, 
(四 ) 的 相合 估计 
证 ， 任 取 8， 找 m>0 充分 小 ,使 当 
[yr — 9 | <y, 一 二 用 
时 有 [9 人 一 (100) ,95 四) | 过. 此 处 se>0 为 事先 
给 定 的 数 . 由 有 的 入 合 性 知 , 弃 在 mels), 使 当 %>m(s) 时 , 有 
Pll GCE 77, FH 0 |) ie/p, $=1, .…, b, 
记 如 4s) 一 max mt{e). 则 当 %w 产 nt8) 时 有 
Pell BCEy, 一 人 | 人 “PD) >1— 8, 
由 此 可 知 , 当 %>nts) 时 有 
了 em 让 (三 有 G(X 有 
— pg , ,Go| a) >1—ae. 
这 证 明了 疡 要 的 结果 . 


(二 ) 估计 最 的 相合 渐 近 正 恋 性 (Consistent asymptotically 
normal, 简 记 为 DA) . 


定义 2.6.2. 设 了 (Ti …， 到 ) 为 g(9) 的 估计 .车 存在 0 (9)， 
0<sy (的 <co 对 任何 9EG， 至 
WA 下 这 CC， 三 一 9(9)] -工友 (0 v0)). 
(2.5.8) 


siB1= 


对 任何 8EG 则 称 站 为 8( 扫 的 相合 渐 近 正 态 估计 ， 简 称 C&AN 人 
计 ， ?2 (的 /rm 有 时 称 为 9 在 9 点 的 渐 近 方差 . 
如 果 参 数 空间 日 为 欧 氏 的 , 且 收 敏 性 他 .5.3) 在 任何 9E@ 的 
某 邻 域内 有 一 致 性 ， 则 称 5 了 为 y( 人 的 相合 一 致 渐 近 正 态 估计 ， 简 
称 CUAN 居 计 ， 
显然 ,满足 条 件 @2.5. 中 的 8 必 为 g(9) 的 相合 估计 . 
定理 多 .65.2. 设 3 了 3 为 g( 四 的 CAN 悄 计 ， 阔 数 p 人 满足 如 下 
的 条 件 ， 
1. 对 任何 %% 在 的 定义 域内 ， 对 
在 何 6Ee@, g(0) 在 g 的 定义 域内 ， 
2. 对 任何 9E9, pg' 在 yg( 抱 处 存在 有 限 ， 则 yp 直 (于 2 
…，)) 为 gl9 (0)) 的 CAN 估计 . 
车 进一步 假定 5 为 g( 扑 的 CUAN 估计 ，8( 的 在 加 上 连续 (此 
处 假定 8 为 葡 氏 的 )， 且 对 任何 9E go: 在 g(9) 的 某 邻 域内 一 致 
连续 , 则 yg 加 (ZI …, 互 ) 为 pg 人 的) 的 CUAN 估计 . 
证 . 任 给 85E69, 则 
Vn [yp GT, wi 0) — py) 
=—V np gO)) GR, + Ho) —g(0)] 
+iv nm [TH 1, ZN) — gD]. (2.6.4) 
此 处 %>0,， 当中 (CE …， 互 一 9 的 ， 由 于 乡 为 g 全 的 OAN 全 
计 , 对 任 给 >0， 当 mn 充分 大 时 ,将 有 
PlGFs, £, TO gD <a) >1—e, 
而 当 s 充分 小 时 ， 由 18 一 9 (全 1<e 可 推出 |"| 不 超过 某 个 指定 的 
8 之 9， 这 说 明 当 nn->oo 时 , F 依 概率 收 但 于 0 但 Vn [CE 、 
…， 玉 一 J 的] 当 w->co 时 有 确定 的 极限 分 布 , 因此 有 
Vn 0] 一 > 0， 对 任何 0&8， 
(2.5. 
这 星 一 > 表示 依 概率 P, 站 伍 。 由 (2.5.B) 可 知 ，@2.5. 全 左边 与 
其 右边 第 一 项 有 同一 极限 分 布 , 但 由 假定 
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/页 [CE 2, Ro) gO > NO0, v0)), 
他. 后 ,的 
放 有 /Wp' (9 (的 ) [5 一 9 的 ] 一 > GO， 人 Gy( 的 ))2( 们 )、 这 下 
明了 定理 的 第 一 部 分 ， 要 证 明 第 二 部 分 , 只 需 注意 在 所 设 条 件 下 ， 
在 6 的 一 充分 小 的 邻 域内 将 有 光一 致 地 依 括 率 收 敏 于 0 当 m yeo 
(这 由 了 为 9( 扑 的 CUAN 估计 9(9) 的 连续 性 及 y' 的 一 致 连续 性 
立即 得 出 )， 出 些 可知 在 8 的 一 充分 小 叙 赴 内 ，(2.5. 鸭 的 收敛 性 
也 是 一 致 的 。 最 后 , 由 色 .5.6) 在 的 充分 小 的 邻 域 内 的 -一致 性 ， 
推出 
Vnpg 0) (GF, FO gO > 
N (Ofp' tg (0))J (0) 

在 9 的 充分 小 的 邻 域内 的 一 致 性， 因而 由 (2.5. 仿 得 出 所 要 的 续 
果 . 

系 %.65.1、 车 gp! 和 vw 都 是 各 自 普 元 的 连续 函数 , 则 当 p/(g(9)) 
滨 和 (0) 关心 时 ,有 


Vn [pCERL "Tn 0 I 
0, 1), 
特别 , 当 g(0) =9 时 ,有 
Vn [p(T ,a)) p01] I 
[ERROR 
定理 2.5.2 及 其 证 明显 然 地 推广 为 下 面 的 形式 . 
定理 2.5. 作 . 设 和 == 1 …, ,分别 为 gl) 的 估计 车， 
i$ 一 1, …, p， 且 存在 定义 于 8 上 的 矩阵 函数 (9)， 致 
MRTG CRs, 下 四， DE I ) 


— (gi(0), 7, go NO, VN). 9.6.7) 
请 数 pn, ry yo) 满足 条 件 . 
1. 对 任何 加 及 Cr (六 人 hi wn) ， Wy pat ty 2 ) 
落 在 g 的 定义 域内 ; 对 任何 8E@，(gi (9)，…, gs( 的 ) 蓝 在 9 的 定 
义 域内 ， 
2, 对 任何 9E6, g 在 点 (1),，…，gs(0)) 处 可 导 ， 则 


. 记名 


i 
hs 


p [fy ny 四 为 ALA ey gp( 六 ] 的 CAN 估计 ， 生 
vn [p(T Uy 攻 s,)， ~, 久 ( 王 1， ~, | 
—g(g10), «7, gO) > NWO, ur (OV (Ou 0)), 

ap 8 
其 中 wr (0) -( 训 ， 人 | 本 
又 若 (2.5. 分 中 的 收 俩 作 在 任何 8 的 充分 小 的 侣 域内 一 至 而 gp 的 
一 阶 访 导数 连续 , 则 p(B …, 9) 为 pu( 鸭 ，…, gy 的) 的 OUAN 
合计， 
证 明 留 给 读者 . 


三 》 最 优 渐 近 正 态 估计 人 Best asymptotically normal， 人 简 记 
为 BAN 估计 ) 


在 较 早 的 绕 计 著作 中 有 时 引进 所 谓 “ 有 效 合 计 的 慨 念 ， 这 是 
基于 0~ 上 不 等 式 而 来 的 、 设 了 为 y9( 的 的 无 偏 舍 计 ， 则 由 CO-R 不 
等 式 知 (在 一 定 的 正 出 条 件 下 ) Varo( 从 3 演 [ 芳 二]276nr( 的 )D、 因 
此 可 以 把 这 二 者 的 比值 《以 Vars (内 作 分 母 ) 称 为 了 的 “效率 >， 当 
效率 为 1 时, 称 邓 为 g(9) 的 有 效 估 计 . 

这 个 定义 的 缺点 是 很 明显 的 ， 因 为 我 们 已 见 到 ， 能 达到 CO- 如 
下 界 的 请 况 不 荐 常规 而 是 一 种 例外 、， 这 样 在 多 数 情 况 下 有 有效 售 计 
将 不 存在 .因此 有 人 考虑 将 "有效 ” 的 要 求 放宽 为 所 谓 *“ 渐 近 有 效 ”， 
如 当 ”>se 时 上 上 述 比值 趋 于 二 这 个 定义 虽然 部 分 地 解决 了 上 述 
问题 , 但 仍 存在 重要 的 缺点 ， 即 方差 Vars( 从 可 能 不 存在 或 蕉 于 确 
定 , 页 此 在 一 般 情况 下 很 难 验 证 是 否 具 有 这 个 性 质 . 

然而 ,， CAN 舍 计 是 常见 的 。 自然 地 , 车市 和 负 都 是 8( 的 的 
CAN 估计 , V [名 (了 …， gO]— > (0, wl)), j= 
1, 2, 而 wa 人) < 多 (2), 则 我 们 认为 六 渐 近 地 忧 于 92, 因此 就 提 
出 如 下 的 问题 : 在 一 切 QAN 信 计 中 , vw(0) 的 下 界 如 何 ? 在 -一段 时 
间 里 , 人 们 曾 猜 测 这 下 界 就 是 0-R 下 界 ， 这 导致 如 下 的 定义 ， 

1) 增 祥 本 大 小 为 1 时 , 邯 蔗 ] 的 Jisher 信息 函数 。 
"B44. 


定义 2.5.3. 设 对 任何 9E6, 当 mwec 时 ， 


VAG, ££ TZ) 一 (9)]- 二 > NCO, Lg'(0)1/ICO)), 
则 称 了 为 (四 的 最 优 渐 近 正 态 估 计 , 简称 BAN 和 佑 计 ( 当 然 ,此 处 
假定 互 1:， 达 3 … 为 i 近 . 样本 ) . 

然而 ，Hodgee 后 来 举 出 一 个 例子 ， 说 明 v( 的 可 以 傈 于 0- 县 
下 界 . 这 就 使 上 述 定义 的 合理 性 成 了 问题 . 这 种 估计 叫 “ 超 有 效 
悄 计 ”CBuperefhioient estimate”), 

例 2.5.1. 设 9 为 86 的 QAN 估计 ， 且 参数 空间 日 包 售 8 一 0 
的 一 个 今 域 ， 记 

Vn + XY) -下 -> NO, v(0)). 


定义 
of Rs, + TE), 
当 18 RO | Sn, 
*( 且 ,| 
y 《 1s 时 五 同 FI 2 下 mw)， 
由于 IOCFy, Kn. 
i g 一 四 1, 当 0=0, 
lim Pat|g (Ty *, Fn | < {eo 当 bz0. 
知 ， 
其 中 WA [六 (CE FN) -60> NO, oD). (2.5.8) 


、 ov (OG 9 一 0 
7 -to， 当 9%0. 
这 样 , 取 xm0 可 以 使 如 (的 任意 接近 于 0. 

直接 从 这 个 例子 看 , 可 能 得 出 结论 , 认为 BAN 估计 这 个 概念 
也 是 没有 意义 的 。 不 过 ,进一步 的 研究 吉明 , 总 的 说 来 ，BAN 和 
计 这 个 概念 是 一 个 合理 的 .有 用 的 概念 ， 例 如 ，LeCam 在 1958 年 
证 明 ( 在 一 定 的 正则 条 件 下 , 下 同 ): 渐 近 方差 小 于 CG-8 下 界 的 那 
些 参 数值 8 只 构成 一 个 Lebesgue 零 测 集 ， Rao 在 1961 年 证 明 ， 
在 OUAN 估计 中 , 渐 近 方差 不 能 小 于 0O-RB 不 等 式 所 给 的 下界 , 四 
了 此， 一般 说 来 超 有 效 性 只 能 出 现在 很 稀有 药 、 非 一 致 收 仿 的 情况 
中 ， 员 一 方面 ， 为 了 克服 类 似 于 例 3,5,1 那 种 情况 带 来 的 困难 ， 


ras 


IE 


Bahadur 在 1960 年 引进 所 谓 “有效 标 准 偏 关 ” 的 梳 念 ， 从 另 一 个 
角度 证 明了 C- 玉 下界 的 有 效 性 。 他 的 盾 果 可 表述 如 下 : 若 了 (Eu 
“为 gC 四 的 相合 估计 , 定义 mw 它 为 方程 


Pid (Fy, TO) —g (0) | a) -2|1 一 2(#) 


之 解 , 这 里 要 为 了 玉 (O, 了 D 的 分 布 画 数 。 这 个 7 的 意义 如 下 ; 若 5 为 
OAN 佑 计生 成 立 (@.5.6), 则 将 有 
PCG CH, …， Lo) —g 0) |>8) 
-PVnlf-g | /VD /von) 


8 
~2|1— s(n) 

所 以 s 大 体 相当 于 Mvt0) 7 的 地 位 (注意 从 7 的 定义 , 它 与 9 信 
计量 及 s 都 有 关 )， 这 就 是 称 它 为 “有 效 标 准 偏差 ”的 根据 . 
JBahadinr 证 明 ,对 一 切 9 有 : 先 令 m->co 币 后 >0 时 , tr? 的 下 极 
恨 不 小 于 0-B 下 界 。 总 之 ,上述 的 一 些 工作 证 明了 ， 总 的 说 来， 
OR 下 党 不 失 为 CAN 估计 的 浙 近 方差 的 一 个 有 效 的 下 界 ， 因 而 
BAN 售 计 还 是 一 个 有 用 的 概念 ， 

BAN 估计 的 最 重要 的 性 质 在 于 其 与 琢 大 似 然 估计 的 联系 : 在 
很 广 的 条 件 下 , 极 大 似 热 估计 就 是 BAN 估计 . 

以 上 我 们 是 就 一 个 估计 量 的 情况 来 讨论 ， 对 多 个 估计 量 的 情 
侣 这 些 概念 有 自然 的 推广 . 

设 g(6) 一 (gi 的，…, gy《0))" 为 定义 在 参数 空间 日 上 的 竺 
估 西 数 ,每 个 gC) 都 取 有 限 实 值 . 设 和 (Zs 了) 一 (1 
为 g (的 估计 量 , 8% 一 2，… 
称 台 为 g 人) 的 相合 估计 , 洁 

lim P, (9 (Z 三 ) —g (0) >8) =0, 

对 任 给 8>>0 及 9E8， 这 显然 等 价 于 说 每 个 页 是 g,( 四 的 相合 信 
计 ,s 一 1,，*…, ， 强 相合 性 及 一 至 相合 性 的 定义 也 与 上 ~1 的 情况 
类 似 ， 

称 了 为 gC 的 .QAN 合计 ,车 《了 4 卫 s… 为 id. 样本) 

186. 


Vn GR, TX) 90))— > WO, VD), 

{2.6.8) 
对 任何 9EB，F(O) 为 上 阶 方 阵 ， CUAT 估计 的 定义 可 类 似 地 移 
过 来 . 显然, 车 弛 为 g( 四 的 GAN(CUAN) 估 计 , 则 条 为 (四 的 
OAN (CUAN) 傅 计 ， 对 5 一 1，…, KE、BAN 情 计 也 按 CO-R 下 界 来 
定义 : 若 在 (3.5.8) 中 了 (9) 达到 人 .3.29) 式 右边 规定 的 下 界 2， 风 
称 轩 为 J (四 的 BAN 估计， 特别 ， 当 儿 全 一 0 …， 瓜 ) "时 , 此 
下 界 成 为 (6)， 显然 ， 车 多 为 g( 四 的 BAN 估计 ， 则 对 $6 一 1， 
为 如 (四 的 BAN 估计 . 


$2.6， 拖 估计 和 极 大 似 然 估计 


本 节 我 们 从 大 样本 理论 的 角度 介绍 两 种 重要 的 估计 方法 ， 即 
矩 估 计 方 法 和 极 大 似 然 舍 计 法 .它们 不 但 在 估计 理 论 的 历史 上 超 
过 重要 作用 , 到 现在 , 在 应 用 上 仍 占有 重要 地 位 。 我 们 看 到 , 判决 
潮 数 理论 给 我 们 树立 了 一 些 新 准则 , 丰富 了 估计 理论 的 内 容 ,但 是 
当 我 们 画 临 一 个 具体 问题 时 ， 要 借助 判决 函数 的 方法 去 找到 一 个 
最 优 解 ,一 般 都 很 困难 . 这 时 我 们 往往 不 能 不 仰 仗 一些 较 直 观 的 
方法 作出 基 种 佑 计量， 然后 再 从 理论 上 研究 其 性 质 ， 在 这 些 直观 
方法 中 , 以 上 岂 述 两 类 方法 是 比较 易 行 而 有 效 的 . 

总 的 说 来 , 在 应 用 上 说 矩 估 计 法 较为 易 行 , 由 之 作出 的 估计 一 
般 为 QAN 估计 , 但 除了 在 比较 简单 的 情况 外 , 多 不 是 BAN 合计 . 
在 这 一 点 上 其 性 质 不 如 极 大 似 然 估计 好 , 如 前 所 述 , 在 很 广 的 条 件 
下 极 大 似 然 估计 是 BAN 估计 .。 但 是 ， 在 不 少 情 况 下 求 极 大 似 然 
估计 往 往 涉 及 比较 繁复 的 计算 , 


(一 ) 是 估 计 和 样本 类 的 基本 性 臧 


以 下 若 无 其 他 声明 ， 我 们 总 假定 志 y “…， 郊 * 是 质 自 某 分 布 
五 《一般 很 定 着 一 维 的 ?的 iid, 样本 ， 卫 局 于 一 定 的 分 布 族 ， 当 在 
了 D 此 处 与 =1 的 情 视 一 样 , 了 {四 应 理解 为 三 : 的 信息 阵 。 
* AT 。 


a 


计算 中 涉及 到 三 竟 某 阶 矩 时 , 我 们 就 慨 定 这 第 存在 有 限 ， 
以 于 记 随 机 变量 , 其 分 布 函 数 为 了 。 我 们 知道 , 所 谓 变 量 于 
或 分 布 了 的 原点 矩 , 就 是 指 


m= dF) BEN, kh-l, 2, 3, 
而 其 中 心 矩 则 是 指 
mr 一 人 Game 四 —E(F-o)nN, k=~l1, 2, -.--, 


显然 , ua 就 是 鞋 的 均值 加 (于 ), 1 一 0, 1 是 并 的 方 莹 Var( 立 )。 
另外 , 还 有 所 谓 绝 对 原点 矩 和 绝对 中 心算 ， 它 们 分 别 指 避 (| 于 | 
种 (| 及 一 ol). 

如 果 斑 1,…， 下 是 从 吾 中 摘出 的 iia. 祥 本 ， 杰 从 之 估计 
性 或 上、 再 一 修 显 而 易 见 的 估计 量 是 ， 


对 mr mw 一 过 总 
对 nu oo 于 福 (一 


ar 和 ms 分 别称 为 (E 阶 ) 样 本 原点 炬 和 样本 中 心 短 。 虹 处 为 记号 
简便 , 没有 标 上 出 wm 与 (及 及 1，…， 玉 中 的 关系 , 因此 ,对 记号 gw， 
我 们 实际 上 是 了 解 为 一 列 估计 (对 ”一 了 2, *…)， 
将 这 一 点 加 以 引伸 ， 就 得 出 一 般 的 矩 估 计 活 。 设 我 们 的 分 布 
族 包 售 参 数 而 希望 估计 9 的 某 个 函数 9 ( 们 。 如 果 能 够 找到 一 
种 方法 将 9 全 表 为 分 布 的 有 限 个 矩 的 函数 ， 
FO) ~ he ts, Hs Hi 7) (2.6.D) 
则 可 以 用 
ZE 一 全 《3.6. 分 
来 估计 它 , 这 种 方法 就 叫做 矩 估 计 法 . 一 个 典型 鲁 子 是 四 (ce，o9) 
4 和 中 分 别 是 总 体 的 一 阶 原点 窍 m 和 二 阶 中 心算 Ws， 我 们 可 以 
分 别 用 四 和 ms 去 估计 它 。 通常 为 照顾 无 仿 性 ， 将 ms 修正 为 


2 mm 总 CC 一 总 )?( 在 这 个 简章 例子 中 我 们 也 君 到 


%—1 如一 


* 34. 


矩 估 计 不必 是 无 偏 的 )， 下 面 的 例子 可 以 作为 矩 估 计 一 般 方 法 的 
代表 。 
网 2.8.1， 考 左 密 论 族 (对 工 测度 ) 
, 
Fo 9 2) = EZSY 1 
0, v0, 
—1< oo0, 0<H 0, 
要 由 样本 苦 1,，*…， 辽 , 居 计 外 和 如， 直接 计算 知 ， 


mT (+ /TT( 沪 二) 


mT( 叶 和)/T( 二 ER ). 


从 样本 下!，…， 王 ,算出 本 dy 代 才 上 式 中 的 om，oa， 得 出 一 个 
方程 组 , 其 解 让 和 高 即 作为 色 , 负 的 估计 ， 在 此 例 中 找 不 到 形 如 
(2.6. 的 解析 考 达 式 , 而 只 能 用 数值 方法 . 

当然 ,在 总 体 秆 不 存在 的 场合 , 如 Cauehy 分 布 族 


Et —eo<hco, 


唱和 矩 估计 法 不 能 用 . 这 时 可 改 用 其 它 适当 的 方法 ,如 Fitman 估 
计 . 极 大 似 然 估计 和 样本 中 位 数 等 , 都 可 用 来 估计 妈 . 

以 上 是 对 矩 居 守法 的 一 个 措 述 ， 我 们 玲 于 给 它 一 个 明确 的 正 
式 定义 。 这 主要 由 于 , 被 估计 的 g (人 通过 总 体 矩 前 表达 式 一 般 不 
是 唯一 的 , 内 而 基于 筷 估 计 可 以 得 到 种 种 不 同 的 佑 计量 .例如 , 考 
察 Poisson 分 布 族 , 其 人 参数 和 既 为 总 体 均值 四 ， 又 为 总 体 方差 种 ， 
因此 按 矩 佑 计 法 , 可 以 用 四 = 站 或 ”sa 去 估计 它 . 在 这 里 , 权 作 一 
选择 需要 有 其 它 的 准则 ， 例 如 , 至 是 和 的 MVUE 估计 ， 而 ms 则 
不 是 ， 又 如 , 在 分 布 族 访 (0, 力 中 要 估计 9(6) =1 十 总。 我们 可 以 
用 工本 .但 另 一 方面 ,Y(D) 也 等 于 总 体 的 二 阶 原点 矩 , 故 也 可 以 
用 四 、 在 这 里 ,ms 基 无 凡 售 计 而 i+ 加 不 是 , 然而 , 报 1 十 吕 修正 


为 1 一 士 十 品 则 得 到 关于 完全 充分 统计 重兵 的 无 偏 估计 ， 即 


MVUE. 
下 硬 来 研究 样本 矩 的 数字 特征 . 
a. 先 考虑 里 ==gu， 这 是 作为 总 体 均值 m 的 人知 计量， 我 们 部 
知名 为 样本 大 小 ) 
Var(¥) = Var(X) ~ po, 
更 高 阶 的 中 心 矩 也 可 算出 ， 例 如 
BIT -0 = RIT) t+ (Tm) 
展开 后 ,只 有 两 种 类 型 的 项 五 [(, 一 mn) ,以 及 
次 [一 oa) ( 王 一 04)]， 人 到 
由 独立 性 , 后 者 为 0, 攻 
BT[( 了 -四 习 = 二 ms= 古 mm 


同 法 算出 ”再 [( 各 一 oz) 亿 一 -本 吧 证 3/ 罗 。 


一 般 地 可 以 证 明 ， 

引 理 2.6.1. 对 上 ~ 了 2 … 有 

ELF ~) 0 ), BLOF -od OD). 

(2.6.8) 
证 不 失 普 这 性 可 假定 a 一 0。 这 时 
BR = LTT+ 

(Xa+… 十 斑 2+ 的 展开 式 包 含 形 如 ?9…Z 各 的 项 ,证 
和 十 "… 十 向 一 引 一 1, 由 于 妃 (ZD -ou~0, 车 有 一 个 或 多 个 如 1 
划 该 项 之 均值 为 0 故 只 带 考虑 形 如 工 $… 工 的 项 ， 其 中 每 个 
>2， 这 时 必 有 j<4 一 1， 因 此 , 所 有 这 种 类 理 的 项 , 其 数目 不 起 


过 加 0G) (站 中 0.( 力 为 只 与 和 才 有 关 而 与 无关 的 常 
数 ， 显 热 
轴 c.0 (5)-o0 


= 90» 


因此 
EL*) = OW) On), 
同 法 证 明 公 .6.3) 后 一 式 ， 习 再 证 毕 、 
b、 现 在 考虑 样本 原点 矩 m。 它 与 样本 均值 在 原则 上 无 异 ， 
因为 ~ 二 座 甩 b 而 ZZ …， 荆 * 仍 为 id, 这 样 与 a 相似 ,我 们 
得 到 


Var (aw) -工人 (oz 一 虽 ， 
1 (3.6.4) 
Bley — ow)"] — 3 (can — Baan + 208) 
等 等 ,以 及 对 % 二 I， 2，…: 
El —o)™ 1 =O0m™), El —ar) m=O"™. 
另外 也 不 难 算出 wm 和 的 协 方差 ， 
Cov (ay, op) = E(x0y) — BE (aa) 


二 
一 -二 [Enaztd 十 m 全 一 ow mr] — or os 


-工人 os 一 mo (2.6.5) 
o. 现在 考虑 样本 中 心算 mw， 其 数字 特征 也 可 按 与 上 面 同样 
的 方法 算出 。 在 计算 中 只 涉及 一 些 初等 代数 的 演算 , 但 过 程 比较 
繁复 ， 我 们 只 证 明 几 个 今后 要 用 到 的 事实 ， 首先 注意 ; 不 失 普 遍 
性 可 设 再 (站 ) a 一 0, 因为 可 将 下 ,一 叶 到 为 
和 一 站- (下 一) 一 (下 一 由。 
我 们 先 证 明 
Hm) -各 +O (=). (2.6.6) 
事实 上 
m= 诺言 (于 )* 


—m— (7 ) Zarat (2 JP {2.6.7) 
加 (an) 一 op pn( 注 意 忆 设 召 ( 了 ) = 站 , 而 


* 191™" 


ee i rt Fs eh a i 


| 再 (和 fa D |< [BT .Be 
由 引 理 3.6. 工 知 (时) -Or9， 故 
加 (了 oO( 二 ) j=2, 3, …, hh (2.6.8) 


而 
B(E os) -~ E( 3 XY 守 ) 
= nl pm (2.6.9) 
直 (2.6. 人 站 一 (3.6 全 得 (2.6.6)、 


其 次 ,我们 证 明 


和 Var 《oma) 一 二 (om 一 2 jw-apowra 一 拭 十 职 jog jo-4) 


+0( 广 ). (2.6.10) 
事实 上 , 由 (2.6. 四 知 
2 
| 《ax 一 og) -(1 x +( > je- -| 
De (qs — ar) ?+ ER 1 — 2 (Gs — or) Tar th 
(2.6.11) 
中 之 项 或 者 包含 有 全 的 三 次 或 更 高 的 矢 次 ,或 者 包含 有 (x 一 os) 
及 互 的 二 次 或 更 高 寒 次 ， 用 Sohwars 不 等 式 及 引 理 3.6.1 及 
人 .6. 有 ,不 难得 出 
ES) -O00 —0n), (2.6.19) 
这 是 因为 恕 (S) 的 表达 式 中 只 包含 工 的 整 矫 ， 放 0 Ga 必 为 
Om) 又 


Ba -on)’— TL (om—o) -二 (ea 一 网 ， 《3.6.139 
D8- 南宫)( 帘 台 )] 
-二 [sn—1) | 


= 9 * 


-二 oopstO( 二) 二 papatO( 十 ). (2.6.18 
合法 算出 
再 [Cu 一 au 下 os = 1 ps pe tO(). (2.6.15) 


由 (2.6.11 一 (23.6.45), 得 
E[Cms— pn) 1 


1 sa 1 
一 二 Cin 一 2k pa pwr 一 I 成 寺 ?poa pR-1) +0( 京 ) 
最 后 , 利用 他,6,. 的 ,得 
Varlmz) — BUmm— tm) ~ LE (mn — pl? 


一 B[Com-pm)] +0( 襄 ) 
一 (um 一 Dk iti — + bo) +o( 二 ) 
即 避 .8.10).， 利用 完全 同样 的 方法 证 角 . 
Oov Cms, my) -十 Cs 一 站 sd 一 JU 一 FA 
4b pa Hwa phe) +0( 三 》 (2.6.16) 
Cov( 了 mo = 元 Out 一 map 十 O( 二 小 
《二 是 估计 的 相合 性 及 渐 近 正 恋 性 
定理 2.8.1. 设 (分 二 记 (ou oy ON hr 和 而 为 其 


各 变 元 的 连 钱 函数 , 则 9y( 信 的 矩 估 计 
中 一 (ge (2.6.17) 
为 8( 的 强 相合 估计 . 
证 .由 强 大 数 定 律 ,对 任何 自然 数 3 只 要 mw 存在 有 限 ,就 有 
mm 一 co (q.5.Pr) 对 任何 站 GE 人. (2.6.18) 


另外 , 将 ms 表 为 ( 见 (2.6.7)). 


I》 应当 注意 ;mm 16 等 都 总 96 人 的 函数 , 此 处 及 以 下 为 简化 记号 署 去 了 这 一 点 
= 193. 


mo (jest (2 j*0 a (2.6.19) 


脐 面 指 卉 ， 在 讨论 样本 中 心 矩 时 可 假定 a 一 恕 ( 了 ) =0, 这 时 o,= 
Leos, 由 上 述 

lm m= a = pi (a .8.P, 

lim 里 ~ 0, {48.6.0), 


由 此 及 (2.6.19) 知 
lim oo 一 Ar， (a.0.Po), .6.20) 


几 人 .6.17)，(.6.18) 和 亿 .6.20), 并 利用 天 的 连续 性 ， 立 邯 推 出 
所 要 的 结果 . 
么 22.86.1. 在 定理 条 件 下 兴 估 计 是 弱 相 合 的 ， 
定理 2.6.2. 在 定理 2.6.1 的 记号 下 ,车 对 任何 9€8, 天 (ga 
2 2 对 各 变 元 的 一 阶 仿 导数 在 点 (au … em 避 。 
… jep) 处 存在 连续 , 则 矩 信 计 弛 为 gC 外 的 QAN 合计 . 
证 ， 首 先 注意 ， 由 独立 同 分 布 情况 下 的 多 维 中 心 极限 定理 立 
即 推出 ， 
VR [Gn 一 ao，…， (一 oa 一 > HCO, A), 
(3.6.91? 
此 处 4 一 Cvo) tt 而 
Neo = CoV (Ga a), Wy V1 下 (2.6.22) 
此 处 Cov (es 0s) 由 (2.6. 肋 给 出 
因为 娃 何 上 可 表 为 my … 码 的 一 个 密 项 式 ， 由 9 四 一 
下 (os 可 知 ， 它 可 表 为 某 些 原点 第 的 函数 ， 
90 = Hilos, *, oo,). (2.6.23) 
和 且 显 热 , 由 廊 在 (4 gui pi 处 有 连续 一 阶 仿 导数, 知 
五 在 (om …, 0%,) 有 连续 一 阶 偏 导数 ;而且 
§=H (0,, Fa) 
因此 由 @.6,2 四 及 定理 2.5.2' 立即 推出 
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Vn OT, *, TY) NO, ott)). 


其 中 
g{#) = pp ED ge. (2.6.24) 
而 t 
_ 8 ,I 
2 Bu | jel (2.6.25) 
定理 得 证 . 


在 有 些 情况 下 ，8{( 钱 的 下 迷 式 中 只 包含 中 心 逢 ， 以 及 可 能 还 
有 均值 几 ; 
FD ha His 1 he) 
别 在 计算 渐 近 方差 b( 胃 时 ， 可 不 必 化 到 避 .6.28) 的 形状 , 而 用 公 
式 ( 注 意 ( 人 .6.16) 式 ) . 


000) - 当 吕 Xegogw (2.6.26) 


gs 的 定义 与 名 ,6.2 四) 类似, 而 

Hs 当 W #1 

Bi— a 1, P22, ,+1 
Dswtio— Su Hse Ho ~— Sobral Hs—1 — Lbs Uys 
十 和 和 Ls Hj 有 一 2 二 
(2.6.27) 
这 个 简单 事实 的 证 明 留 给 读者 作为 练习 。 
例 2.6.23， 考虑 在 初等 统计 中 习 知 的 量 


pa 了 gs pa/1—3, 

它们 分 别称 为 偏 度 系 数 与 峰 度 系数 。 当 总 体 为 正 态 时 , gz 和 办 皆 
为 0 这 个 事实 有 时 用 来 检验 一 组 数据 是 否 服 从 正 态 分 布 . 由 定 
理 2.6.1 和 3.6.2 知 , 当 总 体 非 退化 (aa 人 时 ， 

ma/m, 太一 own 一 3 
分 别 是 加 和 册 的 QAN 佑 计 ， 其 渐 近 方 送 由 人 2.6.36) 和 (2.6.27) 
决定 ,分 别 为 

Cpe — 12Wapats — 24p80t Ouipot BB pasB + S68) / (4p08) 

以 及 


TE TT i ee nims Lao rr diraaac nr 本 


{pdten— itoriates — Bdeajos | ded posst 


+16andi tt 1523 03) /13, 
当 总 体 为 正 态 时 , 其 值 分 别 为 6 和 24. 

例 2.6.8. 量 和 fos /on 一 MVar( 芋 ) /已 (X) 称 为 所 谓 “ 变 异 
系数 ”， 它 是 一 个 以 总 体 均 值 为 单位 稀 量 总 体 严 差 的 量 、 只 要 
再 ( 互 ) 关 0 则 Vrms /于 为 其 CAN 估计 ， 渐 近 方 差 由 介 .6.36) 和 
(3.8.2 交 决定 为 | 

[oi Qo — 128) — dopa t+ di] / (dad pes) . 
当 总 体 是 入 (a, on 时 ,此 值 为 co? (a 二 20 /2a4. 

根据 定理 2.6.1 和 2.6.2, 矩 估 计 是 QAN 合计 然而， 在 分 
布 族 依赖 有 限 个 实 参 数 的 情况 ， 抑 估计 一 般 不 是 BAN 估计 . 例 
外 情况 限于 分 布 族 是 


J™(%, Wap ls) ~0(0)oxp(B Tlo) dp (wm) (2.6.28) 

的 情况 ， 这 里 不 表 了 :的 密度 ， 记 gp1(0) 一 刀 ,(T(X2)), i 一 1 

…, 上 ， 若 9(9) 可 表 为 为 (pgs (四,，…， gr()) 的 形状 ， 对 每 个 1% 分 

别 以 去 窜 T( 辽 估计 gu(0), 这 里 下;, 了，… 为 自 总 体 (2.6.28) 
中 抽出 的 ii9. 样本, 则 由 系 3.3.1 不 难 证 明 , g(6) 的 估计 量 ? 
FX TD TD) 

(2.6.29) 

为 BAN 佑 计量 ， 只 要 为 对 各 变 元 有 一 阶 连 续 偏 导数 ， 这 个 简单 

事实 的 证 明 留 给 读者 ， 当 然 , 正 是 这 个 例外 包括 了 一 些 常见 估计 ， 

{三 》 极 大 似 然 估计 方法 


本 段 不 涉及 有 关 大 样本 理论 的 问题 ， 因 此 我 们 仍 用 * 来 记 样 
本 . 
设 变 重 导 的 样本 空间 为 他， 级), 上 为 多 we 上 的 go- 有 限 测 
力 注意 , 他 .6.29 所 决定 的 估计 量 已 不 是 典 狸 意义 下 的 拭 估 计 , 但 在 99 有 所 述 
形式 时 ， 这 个 情 讨 是 更 方便 而 自 热 , 卫 革 本 怕 想 与 失 估 计 一 样 。 
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度 ， 记 也 的 分 布 族 为 (Ps9E8)， 假 定 (P, 9E8) jp 记 
fw, 0) =dPs(w) /du 假定 6- 坟 . 
定义 2.6.1. 若 存 在 集 4E Gu p04) 0, 以 及 一 个 由 (2 
绍 。) 到 (8, 56) 的 可 测 变 换 (28e 为 如 的 一 切 Borel 于 集 构 成 的 
- 域 )9" (o， 致 
7 Go 0 人) 一 sc, 0)， 对 任何 =E 玫 一 


则 称 久 加 ) 为 8 的 一 个 被 大 伺 然 估计 (Maxinum Likelihood 
了 atimate， 以 下 简 记 为 MLD)， 

车 g( 护 为 8 上 的 已 知 阔 数 ， 而 外 tv) 为 8 的 MLE, 赐 称 
3)) 为 9 四 的 一 个 MLE. 

我 们 指出 : 如 果 只 考虑 满足 条 件 (Ps, 8E BD ~ 的 那 种 o- 有 
很 测度 jx( 即 Pol 光一 0 对 一 切 8E8 合 以 (4)= 站 ; 则 多 是 否 为 
MLEB 与 上 的 选择 无 关 .。 又 注意 9( 四 与 9 一样, 可 以 是 多 维 的 . 

对 任何 固定 的 wE 呈 ,fl(w, 办 看 作为 658 的 函数 , 称 为 似 热 
函数 ， 如 时 了 (w, 站 对 6 的 最 大 值 在 日 的 内 点 处 达到 瑟 似 然 函数 
有 对 吕 各 分 量 的 一 阶 偏 导 数 , 则 MLE 必 满 足 方程 


a 次 0 ,0, t=1, “yy 天 (0 = (0, ny 0)"). 


(2.6.30) 
方程 4 组) (2.6.30) 称 为 似 然 方程 (组 ). 在 旦 = (1 …， 瑟 由， 
这 1 …， 了 于 为 记 . 样本 ， 节 1 的 密度 为 产 ? (6 全 的 场合 ，( 玉 3 


…， 了 Y) 的 密度 为 了 Co 0) 一 直 fco (co 0)， 这 时 将 (2.6.30) 写 为 

og 多 从 -0G -1 …， 局 更 为 方便 ,而 方程 有 形式 
0 j=1, .kb. (2.6.81) 
el 1 


它 有 时 称 为 对 数 似 然 方程 . 

然而 ， 在 不 能 肯定 了 tw, 人 肋 对 8 的 最 大 值 不 在 8 的 边界 上 达 
到 , 或 昌 能 肯定 这 一 点 但 不 知 似 热 方程 的 解 是 皖 唯 一 时 , 满足 似 热 
方程 只 是 ML 的 必要 而 非 充分 条 件 , 但 在 指 获 分 布 族 的 场合 , 有 


s 187. 


a 


比较 确定 的 结果 ， 为 此 我 们 先 证 明 一 个 简单 的 引 理 . 
引 理 &.6.2. 设 日 为 Bs 中 的 一 个 开 同 集 , (0)= 天 9 的 ) 


为 定义 在 其 上 的 实 画 数 ,对 日 中 任 一 点 = Cu … 的 ， 古 郊 ， 
$41 ,都 存在 有 限 且 


-0) ~(- 瑚 狐 )ma>o (9.8.82) . 


， 一 a 
(@(6) 为 一 上 答 方 阵 ,其 人 元 为 材 徊 ) 则 
1 方程 组 
部 -0 Pi (2.6.88) 
和 


在 日 内 至 多 具有 一 组 媚 外 . 
2* 如 方程 组 从 .6.383) 有 解 go 则 
f (00) =—supf 0. (2.6.34) 


证 ， 设 (2.6.88) 在 日 内 有 两 解 gom 久 由 导 前 凸 性 ,这 两 点 

汤 连 线段 全 在 8 内 , 放 可 定义 函数 
HO 了 Ot LD), Otel1, 
由 假定 , 名 入 都 为 名.8.83) 的 解 , 故 吾 !(0) 一 五 "(二 0, 因此 
存在 加 0 二 如 二 1 致 HH"( 办 一 0. 记 
=00ioto ty), 

则 易 见 五 "人 的 = O00 QD) 0 —F) -0. 
由 于 页 关 久 ， 这 显然 与 一 怠 ( 信 >0 了 矛盾， 这 证明 了 上 革 - 

其 次 ,车 印 为 人 .6.39) 之 一 解 而 纺 为 昌 中 尾 一 点 , 则 如 上 述 
作 函 数 五 的 后 ， 由 五 '(0) 0 及 H"OD<0 知 HH'D<<0 当 0<r 
过 1 这 说 明 玉 (从 << 瑟 人 O, 即 了 (9 <7go .这 证 明了 名.6.34)， 
年 抽 为 了 的 唯一 极 大 点 , 引 理 证 毕 . 

现 设 互 ，…， 工 。 为 .样本 , 互 : 的 分 布 为 


OU)erp( SOT jh le) dn (0), 9E0. 


@ 为 自然 参数 空间 , 8 的 内 点 集 Be 非 空 。 这 时 《于 1，…， 孔 s) 的 
rl" 


害 度 为 
feu oo = O° Oexp[ ET ) 


取 对 数 , 得 。 logf~nlogO(9) + 高 0. 训 (2 

假定 TC)，…， 人 Te) 线性 无 关 ， 即 不 存在 不 同时 为 零 的 常数 
co mw on 致 凡人 Tr) 这 时 由 $1.2 结尾 
处 记述, 可 知 


VART Orso), ~ Tse)]1— (SB a>0. 


所 以 ,log 7 (ez … ww 外 作为 8 的 函数 ,满足 引 理 2.6.2 的 条 件 . 
因而 得 到 下 面 的 
”定理 .6.3. 若 对 任何 2&4,…, ww 方程 组 


Ty: 2 - 字 T), 4 一 1 ,Ek .6.85) 


在 @o 内 有 解 , 则 解 必 唯 一 , 且 为 必 的 MLE. 

证 明 直 接 从 引 理 3.6.2 得 出 , 所 要 提 到 的 是 : (2.6.85) 的 解 

{0 (Ts, oo, Te) Sl1, ,2} 

是 mw, …, 咽 的 可 测 函 雪 ， 这 不 难 利用 隐 函 数 的 存在 定理 来 证 明 。 
我 们 不 在 这 个 细节 上 花费 更 包 的 篇 幅 . 

在 实际 问题 中 , 有 时 对 某 些 %,…, a%, 方程 组 信 .6. 引 ) 在 B。 
内 无 解 , 而 极 大 值 在 台 的 边界 上 达到 。 这 时 对 这 些 入 ;ws 
MLE 不 能 用 方程 .6.35) 求 得 ,但 6 的 MLE 仍 存 在 ， 

俩 2.6.4. 利用 定 迎 3.6.3 可 得 出 若干 常见 的 MLE， 例 如 ， 
设 及 1， oo， 旦 为 1id， 瑟 zi 必 让 (a， oa 中。 车 入 


B= am) 一 二 Ty (tm) mg%, 
则 易 见 口 ( 全 一 m 5 exp( 一 大 /400， 而 方程 组 (2.6.35) 成 为 
1 [A 82 _* 
只 到 六)- 训 品 * 带 一 训 % 
解 出 后, 后 为 


生生 


ni 
外 一 一 全 一, 冯 一 -二 -所 一 一. 
2 PC 
这 就 是 外 及 由 的 MLE、 由 于 4 ~ 9/204, me- 到 得 4 和 0 
的 MLE 分 别 为 

o- 卫 (0 过 让 (F 一 0” 
又 如 二 项 分 布 也 人 罗 中 的 Poisson 分 布 (从 中 的 参数 
入 其 MLE 也 可 以 这 样 求 出 ， 当 然 , 在 这 些 例 中 , 可 以 直接 从 原 参 
数 形式 出 发 而 不 必 化 成 自然 形式 的 指数 分 布 , 但 应 注意 的 是 ; 不 少 
初等 教 本 在 求 MLE 时 ， 实 际 上 只 证 明了 所 求 出 的 结果 满足 似 执 


方程 , 而 并 未 严格 证 明 它 确 是 MLE. 
鲍 23.6.5. 设 { 且 了 DD),，"…，( 子 ,了 9) 是 从 二 维 正 态 总 体 


as) G2 ee ma 


中 抽出 的 iia 样本, 要求 o* 和 的 MLE. 总 体 密度 为 


1 
fa, 纺 本 3 有 /一 三 
xorp[— md ss + 一 2pzg) |， 
引入 新 参数 gl 一 [2o* 人 一 69]-5 9s 一 p[o*(1 一 p)]- 风化 为 
自然 形式 的 指数 族 ， 
je y, 0,, Os) 

-Br Ph, 0 Joxp (0sTs (0, 9) + (e, 功 ]， 

其 中 
h(01, 9) ~ 一 于 108 (4 一 的 ,Ti(w, 功 
~ Ty, Ta 的 一 2 

由 (2.6.35), 得 到 决定 0,, 05) 的 MLE (85 的) 的 方程 组 


+ O00 + 


ES -1 

我 们 不 必 解 出 这 方程 组 ,而 直接 由 关系 
一 一 20.[4 代 一 符 ] "1 p= 一 9/29， 
求 出 oa? 和 pp 的 MLE 为 
0 

~ 壮 刀 十 攻 
定理 23.6.8 保证 了 这 确 是 op 的 MULE， 如 果 不 用 这 个 定理 而 
要 直接 验证 似 热 函数 在 这 点 达到 最 大 值 ,并非 一 件 轻 而 映 举 之 事 . 
在 任何 情况 下 ,如果 要 把 由 似 热 方程 的 基 个 解 作为 MLE， 一 般 需 
要 肯定 两 点 ， 一 是 似 然 函数 最 大 值 确 在 的 内 部 达到 ， 一 基 似 然 
方程 只 有 一 解 . 

在 函数 je 有 不 连续 点 时 , 似 然 方程 一 般 没 有 音义 ,在 某 些 
简单 情况 ,例如 截 段 型 分 布 的 特 训 下，MLE 有 时 可 由 直接 视察 看 
出 ， 最 习 知 前 鲍 子 是 互 1，…， 居 为 自 忆 人， 太志 > 及 中 抽出 的 
iid 样本 ， 这 时 由 MLH 的 定义 直接 得 由 : 8 的 MLE 为 

人 一 max{f 瑟 :。-…， 互 四. 
同样 ， 若 互 1…， 焉 为 自 忆 (所 ， 的 【一 ce 到 出 二 的 < 天 co) 中 抽出 
的 诅 样 本, 则 外, 让 的 JE 分 别 为 
Hmin{X, 到 由， 四 一 mmax{f 生 1， 开赴 . 


而 总 体 均值 经 去 的 MLE 为 经 寺 作 ， 与 由 拭 估 计 得 出 的 卫 不 


同 。 这 两 个 舍 计 都 是 总 体 均值 色 计 所 的 无 伪 估 计 .然而 由 定理 


3.1. 工 知 , MUB 经 革 经 为 双 革 备 的 MVUE, 而 矩 舍 计 在 则 不 


是 。 尽 管 表面 上 看 MLE 只 用 了 两 个 样本 的 信息 ， 而 衬 用 了 全 部 
样本 的 信息 . 
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在 比较 复杂 的 情况 下 , 求 MI 常 融 用 数 信 方法 ， 象 Oauchy 
分 布 族 


f lw, 0) -T+ 0) oop<o0, — oo0<0<o0, 


(2.6.36) 
车 互 xz *…, 于 ,次 自 此 分 布 中 抽出 的 iid 样本 ， 划 的 MLE 是 方 
程 


p> I 全 —0 (3.6.97) 
的 解 ， 这 只 能 用 选 代 方法 ， 其 中 比较 常用 的 是 Newton-Raphson 
方法 (这 方法 实际 上 是 求 似 热 方程 的 一 根 )， 设 似 然 函 数 为 
Fw 的 MLE 为 从 后, 则 当初 始 值 
人 与 a bd 


9 
0 EI | 8 | + 宫 坟 所 3 所 | (6 07), 


t=1, ty 天 
这 里 了 =logf， 因 此 ,车 记 


BO) = - (se Eo ) GO 一 ( 努 ， 如 * 

则 将 有 站 必 邱 一刀 -1(619) we (69)， 这样 得 到 选 代 方程 

OD BONVEON, r=0, 1, 2,..,. (2.6.88) 
其 中 gm 为 初始 值 , 这 个 方法 是 否 可 行 , 除了 与 了 有 关外 , 还 取决 
于 补 始 俏 久 的 选择 ， 有 趣 的 基 , 当 芒 选择 得 足够 好 时 ,只 需 适 代 
一 次 就 可 以 得 到 一 个 BAN 估计， 设 下 1， 下 …， 玉 ,,，… 为 自 具 
密度 于 (w, 从 的 总 体 中 抽出 的 iid 样本, 6(ws，…，ww) 为 8 的 相合 
和 估计, 满足 条 件 

limn)O(Z,, 2 EN 
对 任何 9E@. 则 在 了 满足 一 定 的 正则 性 条 件 时 , 以 久生, …, 玉 ，) 
为 初始 值 , 经 过 (2.6.38) 作 一 次 迁 代 ， 得 到 的 估计 量 KE ,TE 
是 8 的 BAN 拓 守 . 
以 Ceuohy 分 布 @@.6.36) 为 例 ， 若 以 jos (x，……，a%) 记 蔗 3， 
和 当 


OT NT 


“…， 琶 的 样本 中 位 数 (样本 中 位 数 是 指 了 !,…， 玉 ,的 次 序 统 计 
量 中 居中 的 那 一 个 。 当 盖 为伍 散 时 ， 则 为 居中 那 两 个 的 平均 值 ) 
划 和 如 我 们 以 后 将 证 明 的 ( 见 第 六 章 86. 了 D, pw 为 8 的 OAN 估计 
但 不 是 BAN 估计 .用 避 .6.88) 选 代 一 次 得 


Ep /+ (一 mm 
Kp) /Ut CF pn) 
是 0 的 BAN 估计. 

如 果 9 有 一 个 充分 统计 量 ko) ， 且 分 解 定理 的 条 侍 适 合 ， 则 
Jo 9) =g((o), 9)h(w)。 由 此 立即 奢 出 : 6 的 MLE( 如 果 存 在 ) 
名 只 与 4 由 有关， 这 是 MLE 的 一 个 优点 。 从 前 面 举 的 均匀 分 布 
的 例子 看 出 , 矩 估 计 就 没有 这 个 性 质 . 


B= js— {2.6.39) 


(四) LE 的 相合 性 
关于 MLE 的 相合 性 ， 在 1949 年 以 前 ， 所 达到 的 结果 只 是 证 
明了 在 一 定 的 条 件 下 ， 对 任何 抠 定 的 goGG@， 似 热 方程 有 一 个 角 ， 
依 概率 Pu 收敛 于 bo。 由 于 似 然 方程 的 解 不 必 是 MLE, 这 并 没有 
表决 MLE 的 相合 性 的 问题 ， 1949 年 Wald 首先 证 明了 : 在 一 些 
正则 性 条 件 下 ，MLE 确 为 相合 估计 ， 下 面 我 们 先 来 证 明 刚才 提 
到 的 关于 似 然 方 各 的 解 的 那个 结果 . 
引 再 2.6.3, 设 p 为 可 测 空 间 (2; Zn) 上 的 测度 , (和 
9 人) 为 定义 在 人 2 上 的 两 个 非 负 细 。- 可 测 画 数 ,满足 条 件 
fOr -1 
而 且 
[logf ® FO dp 0) <o%, (2.6.40) 
则 
[ogg OF ap <| ogf WF Hap lo, 
(2.6.41) 
等 号 当 且 仅 当 了 (2) =g 人) 人 .9. 内 时 成 立 ， 


DB 


a ae me me te 


证 ， 考 虑 随机 变量 辽 , 它 以 ( 比 ， 妇 。) 为 样本 空间 ,其 煞 率 分 
布 为 P(XED -| ,fd 的 ， 记 了 ~g(Z)/F(Z), 则 了 为 
非 负 随 机 变量 (注意 由 (2.6.40) 知 (ZX) 0(a.6.PD), 而 一 logy 
是 0<9%<ee 内 的 是 是 数 ,由 引 理 2.1.2 可 知 
— BllogY]>—log[LB (PY], (2.6.42) 
但 BD -| SOD | Wah) ~, 
放 有 一 再 (logy) >0， 即 2.6. 生 )、 要 人 2.6. 人 9) 中 等 号 成 立 , 充 要 
条 件 为 2.6.42) 中 的 等 号 成 立 ， 由 于 一 logy 的 严 本 性， 这 只 在 
各 辽 》 一 1(a.6. 卫 ) 时 才 可 能 ， 不 玲 看 出 这 等 价 于 

Ff(0) -9 @.e. 问 - 


引 理 证 毕 . 
定理 2.6.&. 设 开 +， 五 ay 下 mw … 为 变量 在 的 ij 庆 祥 本 ， 
开 的 分 布 对 菜 o- 有 限 测度 有 密谋 并 (z, 9)， 假 定 日 为 及 的 开 
集 , 于 名 在 9 上 处 处 存在 有 限 , 县 对 任何 负 交 9 在 
严 全 王 :fa, 入) 四 人 Bo >0 
(这 个 要 求 就 是 不 同 的 8 确实 相应 于 子 的 不 同 分 布 ), 又 


. Bllogf (I, DD) < 
对 任何 2E@, 则 对 性 何如 SE6, 方程 


Se D0 | (2.6.43) 


有 一 解 和 (wy，…， zw。)， 江 中 Po (B(x 4) 一 > 和 o) 一 19. 
证 ， 任 取 和 如 E68 及 芋 >0 充分 小 ， 致 (00 一 8, 名 十 名 C8， 由 
定理 最 后 两 个 假定 及 引 理 2.8.3 知 
Ev, (logf (XZ, 0) > Bo (logf (2X, Ootd)). 

由 强大 数 律 , 有 

了 利 某 些 荐 作 中 的 断言 袁 反 ,由 本 定理 的 条 件 还 趟 能 推出 筷 然 方 各 有 相合 解 , 对 
后 文 定理 3.65.8 也 有 类 似 情 议 。 

2304 。 


0 


Im 1 S10g f(s 00) = BE, (og f COX, 00)), (a.6, Po)s 


Nm 和 权 1 
lim 1 3 logf(X, G+6) 


a 1 


= Es, (log f(T, Bo+8)), Ca.e. Po). 
因此 , 以 概率 (Po) 为 1 地, 当 % 充 分 大 时 ,有 
Dlg Flo, to) > 访 log f (ws, Oo+8), 


即 项 数 和 (9) 一 写 log 了 (v0) 在 区 间 [0o~5, go 十 习 两 端 之 值 都 小 
于 其 在 中 点 铝 处 之 秆 , 这 说 明 存 在 态 玉 1, …, 人 DEC00_5, 2 上 3)， 
致 避 .6.48) 当 有 一 六 (4，…， 互 w] 成 立 ， 即 让 (下 :，，…， 互 。) 为 
(2.6.48) 之 一 根 ， 由 3>0 的 任意 性 知 昌 为 6 的 相合 知 计 。 定理 
证 毕 . 
”区 定理 证 明 中 看 到 , 对 有 限 的 %，(2.6.48) 不 一 定 以 概率 为 
有 解 . 对 使 局 .6.43) 无 解 的 (we …, mw)， 可 任意 规定 6 之 值 ， 这 
时 所 得 的 站 (3:，…， 开 。) 仍 为 的 相合 估计 . 
现在 我 们 来 叙述 并 证 明 Wald 的 定理 ， 它 在 一 些 条 件 下 断言 
MIE 确 有 相合 性 。， 证 明 的 基础 也 是 引 理 2.6.8 及 强大 数 律 。 从 
这 个 证 明 可 以 宕 抑 近 代 大 样本 还 论 风 格 之 一 班 ， 一 大 堆 形式 复杂 
的 正则 性 条 件 . 
设 变 量 的 样本 空间 为 ( 洗 , 绍 w)， 分 布 族 为 (P,, 8E8)，, 
86 一。 假定 (Ps 0E6) jp pp 为 红 r 上 的 oc- 有 限 漠 度 ， 记 
fm, =adPs CR) /dn, 以 及 
子 (at 0, ) = UDP 了 了 (的 a"), (0<p< 00), 
Fm, = Sp ®, HD, (<r<o0), 
1 ft, 0, p) <1, 
Fl, 0, PD, fs, 6, p>l, 


和 _ 了 十 当 gpg, 7 1, 
9 人 {ye, 他 当 p(lw. 7) >> 工 


| 


假定 : 
(i) 对 每 个 ES 和 p>0 ftw 及 户 为 绍 v 可 测 ; 
人 对 每 个 98E6 及 加 E69, 存在 pro ,使 当 0G<p< pn, 


时 ,有 | Dog 产 Go 0, P)]f(2， 6o) dp() <co、 又 当 " 光 分 大 (与 
bo 有关) 时 ,| [ogg 人 站 7 Go, 00) Gp (0) <oos 
Gt) 对 任何 9E@ 有 | |logf (8, 9) fo, OW ap lo) <o0 


。 (tv) 看 在 一 集 4E 有 wm 使 对 任何 9 有 | fe, 9)aj(o) -0 
且 in fw, 人 一 小 当 血 它 三 


(9) 涩 和 人 时 (of (8, 0) FF (0,. 60))) >0, 
(v1) 对 任何 9€9 存 在 一 集 B,E 绍 s, 至 | yo bak 一 0 对 


和 伍 何 EB, 且 当 wwEB, 时 ,有 
fw > fo 从， 对 任何 一 > 
定理 3.6.5， 在 上 述 人 角 定 下 , 设 于 !， 了 斑 s,，…， 下 。。"… 为 变量 
互 的 地 样本 且 对 任何 和 基于 样本 和 …， 研 * 的 ,8 的 
MTLEA (ZEa， …， 节 和) 存在 , 则 所 为 8 的 强 相合 估计 . 
证 明基 于 引 理 3.6.3, 及 以 下 几 个 引 理 ， 
引 理 .86.4. pw, 有， 广 (w 0, 让 ， pr*' (v, 中 都 是 4 的 玫 - 
可 测 孙 数 ， 
证 ， 以 他 wj} 记 售 中 一 若 有 理 点 ， 将 其 中 满足 19。j>>r 的 那 部 
分 取出 , 记 为 信 mw}. 记 p= 上 0 一 r, 则 有 9(%, ?) sap lw, Bm po). 
于 是 由 假定 (让 得 pw 他 为 嚼 sw 可 测 。、 由 9 可 测 知 入 可 测 ， 产 
的 可 测 性 直接 由 假定 (让 推出 ， 
引 理 名 .8.5， 对 任何 9E9, 如 ED 有 
Him Boog f (ZX, 9, 内 ] — EoDogf (X, 0)]. (2.6.44) 
证 ， 记 产 (w 站 一 maxz{f 了 (a 及， 起， 由 假定 tvD 知 ， 当 
“EB 时 有 了 og 天 (vw, 及 站 一 > 108 产 (w, 小 ， 当 p 一 0 由 假定 
GD 可 知 ， 对 某 个 po>>0, 非 负 务 数 族 {log 了 (%, 0 p): 0<PSpo 


sa06u 


a 


被 log 产 (人 外 po) 所 控制 ， 因 此 
Hm Ellogf” (X, 如 p=Elogf’(X, J. 
(2.6.45) 
定义 f(g 及 Pmin{ fr, , p), 1}, fw, O)=min{ fz, , 1}. 
:I 
jlog 产 (人 外 |, 且 当 p00 时 , 只 要 wEBo, 就 有 六 人 及 Pp 二 
(人 四， 因此 ， 若 有 已 0og 7“( 玉 ， 的 ) 一 oo 由 1g 志 
0, 万 (log 了 "(及 , 外) 必 有 意义 且 不 取 大 子 0 的 值 )， 邮 由 控制 收 
敏 定理 ， 
lim ETlog 1™ (¥, 0, pi—E,.[llog F(T, HD]. 
(2.6.46) 
易 见 如 .6.4 和) 当 其 右边 为 一 oo 时 仍 成 立 ， 为 叱 , 取 定 一 个 型 志 0。 
则 存在 mw 一 ce<e<0,， 和 至 


| DJF Cw, 0) ds Cw) < 


以 4。 记 积 分 号 下 之 祭 合 。 由 于 在 此 和 集合 上 (对 任何 固定 的 允 ， 
flogp 0, p), 入 <p<coj 有 界 , 故 _ 


<lim| Uogf™%, 9, DI Co, gd 


-| tef" ke, OIf Co, Odp<M. 
由 开 的 任意 性 , 知 人 .6.46) 的 左边 当 p 一 0 时 , 也 趋向 于 一 oc, 故 
(2.6.46) 总 成 立 , 现在 利用 
FE, [log f(T, 0, a] 
. -= Eo, Llog "(ZX, 0, 入] tB [Llog fF" (TR, 80, 门 ]。 
由 (人 2.6.45) 及 人 .6.46), 以 及 名 .6. 和 5) 两 边 都 有 限 的 事实 , 立即 推 
得 已 .6.44)， 引 理 证 绎 . 
引 环 2.6.6， 对 任何 BEB 有 
lim Blog p(X, = —o%. (2.6.47) 


* 20T 到 


证 ， 由 假定 Gy 知 , 当 zxE 4 时 ，logp(o, 站 一 一 oo, 当 壮 >oo， 
故 logg"(w, 四 一 0， 当 r>oo， 由 假定 的 ,存在 mr>0 至 
加,fp*'( 玉 ，ro)] 有 限 ( 注 意 加 不 取 负 值 )、 因 为 函数 族 flog p" Cw， 
:TT 为 log "(5 ro) 所 控制 ,由 控制 收 人 证 定理 知 
lim E,, [log gr (X, +)] 一 0。 
又 注意 到 , 当 7 增加 时 , 函数 
og pls, DD —log p(w, ) 
非 负 非 降 ， 由 单调 收 合 定 理 , 有 
Hm Eo llog y" (£, 7) ~—log p(X, Wo, 
由 此 式 及 lim Bo Llog PC, ] 一 0 即 得 引 理 . 
引 理 2.6.7. 设 向 EaCSH, 避 交 闭 集 ， 出 
~ gup[f (Xs, Of (Zw))] 
Pallim spy my OO 0) 1. 
(2.6.48) 
证 .由 引 理 2.6.6 及 假定 DD 知 存在 ro, 致 1 
Es Uog p(X, ro)1< Bogf CX, 90)], (2.6.49) 
记 or 一 w 作 0: 上 0 志 vo}。， 出 引 理 2.6.8 和 2.6.5 知 对 任何 
9E€w, 在 在 ps>0, 臻 
EH, [log F(X, 0, py)] <B,, nogf(X, 0)1. (2.6.50) - 
以 六 (8， 忆 记 以 8 为 中 心 , p 为 半径 的 半球 体 ， 则 因 ow 为 有 界 闭 
集 , 由 有 限 复 放 定理 知 ,存在 {9,…, Oj} Cow 致 xc [JBC6,, pw 
显然 
osup Hf WBE oo mo +E (Xs, ro 
因此 , 要 证 (2.6.48), 只 需 证 明 
fF 负 Po (En Peo) 一 站 1 一 
Pullin Ee 人 0) -1 
$=1 


im PUT To) p(T 0) 
Pal lim FR -0)~1. 


0 ， 


这 两 式 分 别 可 改写 为 
Pollim| Siogf (x, ae po) - 吝 log F(X bo) ]= -oo) 
i 
Pallim [Blog p(Xs ro) —Blogf (Fs, bj -一 cj 于 


但 根据 强大 数 定律 , 这 两 式 分 别 由 (2.6.50) 及 (2.6.49) 推 出 ,这 完 
成 了 引 理 的 证 明 . 
现在 转 到 定理 的 证 明 ， 由 于 所 (于 I，*…， 福 中 为 的 (基于 
宇 1 王 。 的 )MLE, 有 
mA 
性 给 s>0， 记 事 忻 
4 一 Ta 020) 当 克 充分 大 时 ， 
如 (ea wn) EB Oo, a)}, 
二 po, 昌 为 以 外 为 中 心 ,8 为 半径 的 闭 球 体 ), 则 由 (2.6.51) 
上 二 Ce Te ao : 对 无 限 个 n% 有 
gup fl Of (on, DF ts Bo) rf (Fn, to)}. 


Farle 


但 由 引 理 2.6.7 知 (os 一 0, 因此 得 到 Po C46) 一 0 即 Po,(4,) 
—1, 这 等 于 说 
了 mm ty, *°, A = (a. 0. Ped, 


即 以为 0 的 强 相合 估计 ， 定 理 证 毕 . 

Wolfowitz 对 上 述 Waid 关于 MLE 的 相合 性 的 证 骨 作 了 一 
个 注解 . 

Wolfowit 的 注解 ， 记 O(a) 一 0: 一 80 >e}， 设 Wald 定 
再 的 条 件 全 部 成 立 ， 则 任 给 9>0 s>0, 必 存 在 只 与 9 有 关 的 
GE 一 0<d<l 以 及 与 5, 8 有 关 的 入 (9，59, 玻 当 nNN(m，8) 
时 ， 

Pal sap HFC 0 /FCF 0 > <e, 


El 


恰 如 在 Wald 定理 证 明 中 那 祥 ， 担 出 Fo Pa "*", Po Ea 
US pe) >0(7) N {0: 191 eo}. 


定义 荆 (00) 如 下 ， 

—27 (8) = Bo,Llog F(X, 9 pa)] — Bs Llog fF CX, 00)], 

一 二 

一 37(R — Bs, Tlog p(X, #0)] — Bollog F(Z, 00)]. 
车 上 式 中 任 一 个 的 右边 为 无 穷 , 则 村 应 的 全 (960) 以 1 代替 . 这样 定 
义 的 TC9D) 都 大 于 0 用 大 数 定 律 知 Pr 直言 (log (下 gu pw) 一 
log 了 (Xs 00)) 一 > 一 27 (9 } -1 因而 对 任 给 s>0, 存在 W 充 
分 大 , 使 当 ?2 加 时 ， 


P(gf (Xs bo po) ~10g 1 (Xs 92))>—T(0)} 


刁 
TI 
对 1 一 二 … 为 即 
Pa{ fs 0% po) /HFCs 0 >o"eo) < 
当 nN 对 $= 了 I ny . 同 理 


位 PplEy, ?0) /让 fF,, ro)>e em | 


<TTT， Nm 如 ++» 


到 dmaxe 9 及 Nn, 8) — mex VA; 即 证 得 所 要 结果 . 
从 Wald 定理 的 证 明 过 程 不 难看 出 ， 如 果 如 是 Rs 的 一 个 于 
集 , 其 边界 记 为 号 以 49, 国 记 ES 与 边 异 百 的 上 距离, 则 如 将 
假定 GY) 中 的 由 | 一 2 改 为 | 列 十 区 雪 本] 天 >so, 定理 的 结论 
对 全 的 任意 内 点 后 成 立 , 即 当 名 为 号 的 内 点 时 ,有 
Po Clim Oi, ~, TR) = Po) 一 工 
然而 , 确实 存在 着 MLE 不 为 相合 的 情况 。 


210. 


例 23.6.6(Bas 由 ， 设 古 :， 互 3 ，…， 瑟 … 为 变量 时 的 壕 
样本 ， 了 的 分 布 为 
0, 9 为 有 理 数 ， 

P(X-D -1 P(X-0) -{1 ， 4 为 天 到 


此 处 0<8<stL. 以 到 记 开 ;十 … 士 瑟 。 则 ( 开 ，…， 互 由 的 似 然 函 


数 为 
OD, YO ， 
Je 人 -{ ey uw 为 大理 娄 
易 见 ,anD 昌 成 到 2 下 站 在 内 二 了 Twn 处 达到 , 且 
人 当日 为 有 理 数 ， 
i 一 上 当 如 为 无 理 数 , 
这 说 明 MLE 所 不 是 8 的 相合 估计 ， 


limF= 


Re 


‘ 玉 ) 让 DLE 的 渐 近 正 态 性 


关于 MELE 的 渐 近 正 态 性 ,Cramer 在 [2] 中 有 所 讨论 . Gramer 
证 明 在 一 定 的 正则 条 忻 下 对 任 给 加 E68, 似 然 方 程 有 一 要 
所 ( 开 *… 玉 小 致 VRC 一 00) 一 > 和 (0, 了 -+(00),( 当 参数 真 值 
为 6 时)， 但 这 还 没有 解决 MLE 的 汤 近 正 态 性 的 问题 ， 自 五 十 
年 代 以 来 , durland, Kulldorf, LeCam,， Bahadur，Daniels 等 人 
对 MLE 的 新 近 正 坊 性 进行 了 研究 。 这 些 工 作 都 是 在 很 繁重 的 正 
则 性 条 件 王 , 证 明了 MLE 为 BAN 合计 ， 本 书 由 于 篇 幅 和 性 质 所 
有 限 ， 不 能 对 这 些 工作 加 以 仔细 介绍 ， 而 只 能 满足 于 证 明 下 面 的 结 
果 ， 

设 变量 互 的 分 布 族 为 {ftw, 及 ait 8E6}, 日 为 及 的 一 
个 开 集 ， 恨 定 


(1) {0 dn(n) — [SHG de) -0. 


的 0<| [2 2] fo Wanle) <o. 


Gl) 存在 性 (加, 致 {MM (eo)f(e, 0)ap(s) <b<oo, 对 任何 

人 万科, 且 | 
Ea | uo). 

civy 不 同 的 和 信 相 应 于 三 的 不 同 分 布 ， 

定理 2.6.6. 在 假定 (人们 一 人 im 之 下 ， 设 琶 ， …， 工 。 为 变量 
匡 的 这 样本 , 则 对 任何 名 8 似 然 方程 有 一 所 BCX, Te) 
满足 VT (一 80) 一 > 加 (0，- 了 碑 y)- 且 似 然 方程 的 任 一 的 ) 
租 合 解 必 为 8 的 BAN 估计 . 

证 ， 由 定理 2.6.4 可知, 在 本 定理 假定 下 , 方程 (2.6.43) 有 一 
根 记 (Zi ，…， 三 ， 满 足 条 件 .Pu 《6。 一 90) ~1， 我 们 进一步 证 
明 , 6, 满足 本 定理 的 结论 . 


(my -em 的 一遍 logf (ow 信任 取 gE@， 当 8 的 真 
值 为 名 时 ， 有 lim 名 (ZX -一 Boln. 9, ), 因此 可 写 


_28L| 7 过 = 强 ， 
0 可 | 天 + 外- -+ 


7 


“0 6.52) 


aL ,, 3 
0 介 于 如 和 后 之 间 ， 此 处 为 简化 记号 ,就 使 用 -5 记 B85 | ,ew 


等 等 ， 由 假定 多 ) 知 对 任何 BEB， Fisher 信息 函数 1( 引 非 零 有 
限 ， 因 此 , 先 由 人.6.52) 得 出 


V5- 的 -二 如 /[ 久 + 名 3， 
然后 两 边 乘 以 Tb ， 得 


Vn CB.— 6) I 一 雹 这 -4 Ht 无 放 入 
(2.6.58) 


此 处 
;> rw 
" 3 全 1+ De 强 ] 


(2.6.54) 


让 年 


注 章 到 
二 红 91) 1 uy 
Vn Vn 04e ez “ 
了 1， 了 了 a，… 为 独立 同 分 布 ， 必定 人 (DD BP) = 0, 
和 Vare 7D 一 了 (00) 0<Tgo 之 oo0; 故 由 中 心 极限 定理 , 知 


1 3895 工 
一 工 (0o) )， ‘2.6.55) 
如 果 我 们 能 证 明 
lim (bt-1) =0 (a. e. Pe), 《2.6.56) 


则 由 此 及 人 2.6.55) 可 知 一 (B。 +D 谣 ->0 当 mw_>co, 因而 由 


(2.6.58) 知 , Vn (6 -90109 与 了 部- 荆 有 同一 极限 分 布 , 即 
W(0, (80)), 这 将 推出 
VR G0 > NO, I-1(00)), 
而 于 为 9 的 BAN 估计. 
为 了 证 明 (2.6.56), 注意 由 假定 名 知 


ol 8 | IC00, 
事实 上 , 由 候 定 6)， 
Eo 全 ge A bo) | 


fm, Oo) a. 淳 和。 -人 区 ) fl Gvd 
PC A 


-| Bn) dp 
-| [2 / fn, go | ] 7 (w, oy dp 
--[ [ay 内 G0) J] fy, Vdp= —I(00). 
因此 和 由 强大 数 定 律 


二 昭和 


ep, 
me B00 


二 工 总 如 1 汪 。 Bu 一 -人 一 了 (Do (8a. 8. Pe). 


(2.6.57) 
又 根 氢 假定 iD， 知 


二 | 纤 |< 工 局 M(CZO 一 > 到 .CCZ)1< 开 (a. @. Pe). 


且 由 对 的 相合 性 知 兵 一 一 0 (a. 8. Pr), 故 


(人 一 机 到 用 一 ”9 (ae Pi). (2.6.59) 


由 (2.6.57) 和 《2.6.58)， 根 据 5, 的 表达 式 (2.6.54)， 立 即 推出 
(2.6.58), 这 正明 了 定理 2.6.6 的 前 一 结论, 后 一 结论 显然 已 包 全 
在 上 述 证 明 中 ， 定 理 证 毕 . 

在 一 些 问题 中 样本 有 1,…， 了 不 是 id 的 。 在 这 各 情况 下 
为 了 证 明 MLE 的 渐 近 正太 性 ， 需 要 对 ( 玉 :。…， 了) 的 联合 分 布 
施 如 相当 的 条 件 ， 以 使 人 08 二 为 渐 近 正 态 ， 当 开 ，…， 三 。 独 
立 但 不 必 同 分 布 时 ， 可 以 施加 Liapanov 昏 的 条 件 。 在 一 个 特殊 
(然而 很 有 用 的 ) 场 合 下 问题 很 简单 ， 即 卫 a， 卫 ws，…， 三 w。… 为 
自分 布 族 {j(o bd 人 ao),9E6@} 中 抽出 的 58 样本 ,5 一 1 …, mm 
日 这 序列 全 体 独立 ， 假 定 每 个 分 布 族 满足 定理 2.6.6 中 的 条 
件 ， 这 时 , 合 榜 本 

1 及 19, 了 1 下 al 于 9 ny 三 ny 
mn 在 ma ny te 
的 似 纺 方 和 为 


0 lg fi(Zw, 9)， 


定理 2.6.4 及 其 证 明 完 全 和 用 于 法 个 情 宫 ， 只 要 和 …， mm 中 有 
一 个 元 限 增加 , 则 对 任何 名 E6, 似 然 方程 必 有 一 根 , 当真 参数 值 
为 名 时 以 概率 为 工 收 伊 于 Bo， 


现在 假定 对 每 个 名 TS 当 ?rco 时 -二 一 和 六 0 这 里 
nn 一 m4 十 … 十 mm。 又 设 筷 是 似 然 方程 之 一 相合 解 , 则 方程 2.6.52) 


9 玉生 


re re Emmap Aspeae re 


在 将 工 改 为 五 十 … 十 Lm 后 仍 适 用 仙 .6.52) 以 下 各 这 作 相 应 的 修 
政 , 注意 到 


= 人 .mm 0， SL)). 


dl 


这 里 (0) 为 分 有 族 {file， 的 ao 的 Fisher 信息 溺 数 , 以 及 
2 光 m1 Ea 
1 二 沁 记 站 ed 和 a0 
— ~ M0), (a, e. PY). 
(2.6.58) 式 特工 改 为 五 十 … 十 Ln 后 显然 仍 成 立 , 于 是 得 到 
VR,— 600—> WN(0, (BnIA0)) ). 
为 了 NM (一 90) 有 家 限 分 布 , 条件 


lm th =1, 


是 重要 的 ， 例如 ， 设 站 1 …， 并 ws 和 了 I，…,， 了， 分别 为 自 总 和 体 
(C6, 中 和 不 (人 do 中 取出 的 记 样本 , 且 之 ;, 了 ;全 体 独 立 , 不 
难 算 出 : & 的 MLE 为 

(+) /5， 


而 MV ( 扩 一 只 有 分 布 驴 (s， 高 ( 塌 十 站)ro*). 除非 -和 的 极 


限 存 在 且 非 0 他 ~ 二 多， 这 分 布 将 没有 极 腿 ， 但 应 用 较 一 般 的 中 
心 极限 定理 不 难 证 明 : 只 要 ”ce， 则 必 有 有 


VSI @ ~ 0) E> NO, 1). 
以 上 关于 单 参 数 情 况 的 讨论 不 难 推广 到 多 参数 情况 ， 设 变量 
工 的 分 布 族 为 7 bo 的 du 办，(o … 01) ~0E6), 6 
为 轧 中 之 一 开 集 假定 
(i) | 2% OW) glw) ~0, di, + 
i 再 


(8) 了 (0) = (Tv(O))wa>0 对 任何 9E@, 其 中 
TO) -| (EFS (Ee) fe, ans). 


Ga) 存在 下 (w), 至 [2 (2)flm, 9)y(z)<oo 对 任 休 0659， 


Ss 
0, &, b, 0=1, "**, E, 
和 应 


(iv) 不同 的 9 值 相 应 于 斑 的 不 同 分 布 . 

定理 2.6.6'， 在 假定 (一 Gm) 之 下 , 设 Za …， 和 w … 为 变 
量 玉 的 iid 样本 ， 则 对 任何 加 EB, 似 然 方程 有 一 解 记 (Eu 
~ 了,)， 满 足 V7 CB. 一 00) 一 > NW (0, 1(0o))， 又 ， 似 然 方程 
的 任 一 0 的 ) 相合 解 必 为 妨 的 BA 可 估计 、 又 车工 sa， 和 av 
电 w 有。 分 别 为 取 自 分 布 旋 {1 Ptz， 们 di， 0e0 
的 iid 样本 ， 且 这 各 不 序列 全 体 独立 ， 每 个 分 布 族 满足 上 述 条 性 
(~ (im 以 记 记 9 的 基于 样本 和 …， 瑟 sw 4 一 1,…,，m 的 
似 然 方程 的 丰 合 解 , 则 当 -型 一 > Xi>0 当 nm 一 > co， 对 
=1, 0 Mh 成 立时 ， 必 有 

Vn-00—> NH(0, (Bud) 小 

这 里 了 (人 为 hy, 从 的 Fisher 信息 阵 . 

此 定理 的 证 明 与 前 述 单 参 数 情况 雹 本质 差异 , 故 不 再 重复 . 

因为 极 大 似 然 估计 不 必 是 似 然 方程 的 根 ， 祖 据 这 个 定理 还 不 
能 得 出 极 大 似 乓 估 计 为 BAN 信 计 的 结论 。 这 个 问题 的 更 深入 一 
层 的 讨论 超出 本 书 范围 之 外 . 

在 定理 2.6.6 的 证 明 过 程 中 ， 我 们 得 出 过 : Vn (一 80 与 


1 1 Blogf(X, | _ 
了 工 [Bo < 这 名 0 ,只 相差 企 焦 概率 收 敏 于 0 


的 量 《 网 2.6.53)，(2.6.56) 式 )。 在 有 > 时 有 类 似 的 结果 ; 
加 一 反 ) 与 Ia(go7s 只 相差 一 个 依 概 率 收 伍 于 0 的 量 , 其 中 
下。 一 (Ym, ys Yap) 而 


B15» 


1 < dlog 六 并 上 ry Hr) 一 PE 
LT nm 名 日 pi 8 9 


7 i 

定理 2.6.6' 尖刀 为 集合 代 ， 2，…， mm} 上 的 计数 测度 的 情况 
对 以 后 很 重要 ， 这 时 可 以 在 比 假定 (i) ~ (iv) 更 弱 的 假定 下 证 明 
问 样 的 结果 下面 来 讨论 这 个 问题 ， 引进 如 下 的 记号 ， 设 { 下 } 
和 为 两 事 随 机 变量 ， 若 当 % -ce 时 ,有 素 。 -了 二 > 0, 记 
一 一 了 ,这 时 可 称 五。 和 了 为 浙 近 ) 等 价 的 . 

引 理 8.6.7， 1 若 前 ,一 一 了 日 征 。 - 工 y 访 , 当 no0, 出 
PF,» > 芒 当 no0, | 

2* 设 {及 省 为 上 维 变 量 序 剂 且 总 ,- 了 二 > 于 ，{4 疏 为 gx 随机 
矩阵 序列 ，4 为 gx 常数 矩阵 ， 而 县 4 的 每 一 元 当 meo 时 依 
概率 收 化 于 4 的 相应 元 , 则 如 XX, 一 一 4。 > 4X. 

证 .1* 是 释 率 论 中 周知 的 结果 ， 欲 证 2 将 4,X 写 为 
A 


加 ,一 > 0, 克 A。 下 ,一 4AE。 但 4 为 常数 和 矩阵 , 由 三。 工 > 
站 知 4 和 -二 > 4X， 再 利用 即 得 所 要 结果 . 

引 理 2.6.8. 设 ( 瑟 ws i 于 ao 服从 多 项 和 分布 有 i 
on) (p>0, 这 p11) 即 


> ni 
DIR f=1, + pe) i PI PD 


(mi 为 非 负 整数 , wz) 


而 .Fan "yy 芷 nn TD 二 1，2, Us 


则 Y, > NO, A). 


3 于 一 3 一 从 
这 里 4 的 多 下 元 4 人 本 3 


» D1T* 


证 ， 定 义 一 串 独 立 则 分 布 的 咱 维 随机 向 量 
P= (了 。， 二 Yn)!'y 《一 工 ， 2, 机 
其 中 名 的 分 布 为 : 
PF.~ (1, 0, +, 0') =py 
卫 ( 子 := (0， 1, ”3 D0) = Day 
P(P,= (0, 0, 1, 1)") — pn. 
则 易 见 
YE)}. 
又 VARCPD) = A. 于 是 由 独立 同 分 布 情况 下 的 多 维 中 心 极限 定 
理 , 立即 推出 本 引 理 ， 
引 理 2.6.9、 设 m，…， am ja …。 和 竺 为 非 负 常 数 , ou 一 


汪 

alog 芭 >0， (2.6.59》 ， 
等 号 当 且 仅 当 西 一 如， 一 二 "时 才 成 立 (我 们 的 守 当 =0 
时 ， alog P=0, 当面 一 0 了 而 wz0 时 则 wlog -9 -co) ， 


证 . 不 失 普遍 性 可 假定 ge>0, $=—1, “…, m, 和 若 有 某 个 
致 加 一 0 则 人 .8.59) 左 边 为 co, 玻 可 设 b>0, 一 4, …, m, 定 


义 随机 变量 互 ， 其 分 布 为 P(X 一 如 ) 一 i=1，…，mm， 由 于 
一 log1 为 严 出 西数 ,用 引 理 2.1.2 得 
Salog HB(-log ¥)> -log HB(X)— ~log1=—0, 
等 号 当 且 仅 当下 以 概率 为 1 等 于 如 (X)( 即 外 时 威 立 ， 即 当 
人 一 总 划一 十， m 成 立 ， 引 理 证 毕 .。 
现在 可 以 证 明 下 面 的 定理 
定理 2.6.7、 设 了 的 分 布 为 
1) 其 实 , 此 引 理 是 引 理 2.6.3 的 特例 ， 
二 人 各。 


i Ee 


了 (一 匀 一 知 if 的 ， 二 一 工 0 E08, 
这 里 8= [名 ,…, BW), 而 全 为 Bs 中 之 开 集 ， 根 定 
全 著 细 po 则 全 1m(go) 一 we(09)|>>0, 
分 2 四 /0; 在 日 内 存在 过 续 ， 对 %=1， ys mm 及 j=l1， 
oy 天 


8 定 义 I.0)- 训 a5 3 2 ,Tl kb 


则 对 任何 8E6B,， 方 阵 了 (四 一 (To (四 ) wws 非 异 *( 注 意 ， 由 此 推出 
IT{ 从 >0 对 任何 8EB)， 

设 芝 1,，… 王 w 为 下 的 衣 梯 本 ， 则 对 手 何 DGEBB 似 
然 方程 至 少 有 一 解 泉 (Zu 和 0)， 满 足 vV 史 (全 一 由- 工 > 
0 二 :的 ), 且 似 热 方程 的 任何 (8 的 ) 相 合 解 必 为 8 的 BAN 估 
计 ， 

证 . 首 赂 ,车 沁 

Dn 一 下 dr "my .0 中 等 于 3 的 个 数 ， 
#=1, s+ ME 及 = 二 1， 3， "ey 
珊 似 然 方程 组 可 写 为 (p= {pr pi)》 


各 oo rp) _ ”一 = 
仿 和 Bi 0, 4D 


任 取 0EB@ 及 5>0， 在 球面 0, ~ {9:10 -gj 时 上 考察 函数 
4 全 = 襄 m(6)log -下 全， 关于 4(p) 之 定义 取 引 理 2.6.9 中 
之 约定 ， 于 是 不 妨 设 wi( 提 间 0 对 j=] -…, mm， 由 引 理 2.6.9 及 
me(6) 的 连续 性 立 见 inf 4(p)= 8>0. 由 强大 数 律 有 Pd pu->zkB 


=1， 1 一 十 “ML, 于 是 以 概率 (Ps。， 下 同 ) 为 1 地 当 2 充分 大 有 时， 
有 


于 中 auog D>o. 


因而 以 概率 为 1 地 当 % 充分 大 时 ， 
办 易 见 , 了 (外 就 是 莹 的 Fisbher 信息 蜡 孟 。 


六 P18 7 > pr log Ta, 


这 说 明 对 数 似 然 函数 log 工 (p) = 之 po log ms (9) 在 闭 球 lp 一 91 


专 6 的 中 心 86 处 之 值 ， 大 于 其 在 球 曾 Cs 上 任 一 点 处 之 值 ， 库 诸 
xi 的 的 连续 性 知 log 上 (9) 在 上 述 周 球 内 必 有 一 肩 部 极 大 点 久 . 此 
#5. 为 似 然 方程 之 和 根 且 由 5>0 的 任意 人 性 可 知 , 车 将 扣 取 为 log Kg) 
在 上 述 周 球 内 与 6 距离 最 近 之 局 部 极 大 点 , 则 抽 满足 PO ( 信 1 
0 一 二， 
以 下 为 简化 记号 , 置 
页 一 (6 Wb By, m0) = Wy ri) 一 各 Dai = Di, 
则 由 名 为 似 然 方 程 之 根 , 得 
D0 1 
人 1 wm O90 
注意 到 之 2 =0, 此 可 和 写 为 


六 Si mt 一 区 VY (me — mo OT 
人 1 纪行 于 5” 
一 1 (2.6.60) 
由 汇 : 恼 导 数 连 续 , 有 
1 
此 处 六 在 以 如 和 久 为 端点 的 闲 区 间 肉 ， 以 此 代入 (2.6.60) 的 右 
边 , 得 
六 8) dn 7~—1, ,kb. 


1 元 ， i 


(2.6.61) 


， _ 1 Bid 
此 处 ~ 六 二 拷问 当 人 >9 时 ,有 di。 一 Jnb9)， 根 据 引 


理 2.6.8, 知 当 n>co 时, V 9% (各 一 wz， …，Zm 一 zm) 有 极限 分 布 ， 
再 注意 到 当 人 -306 时， 全 yw 以 及 32! > 2 0 依 引 理 2.6.72 有 
sO 


MPT FET 


(2.6.61) 的 左边 -有 六 二 人 一 区 Bm 


14=1 or oo, * 


因此 , 由 上 述 如->Ter 的 当 站 一 9， 从 人 .6.61) 推出 


a 三 1(8) .人 {2.6.69) 
此 处 如 = (Zi 2 而 Zr 等 于 (2.6.62) 的 右边 ， 但 由 引 型 
2.6.7 和 5 引 理 2.6.8 知 


Fy NO, HY, BH yo0. (2.6.64) 
其 中 写 ~BBA4B', 而 
_ 工 Dr 1 DT 
B=-( 却 - 23) hE 的 (7, 从 元 为 二- -BG ) 
A—diag Car | rm) 一 《ma 3 mh) Crs Uy Hn) - 


由 此 不 难 算出 


_ ey 1 ri DT _ 
也 -过 x, 0 Be, J 10. 


再 出 人 2.6.63)，(2.6.6 和 得 击 

VR BD NOOO, 1(0). {2.6.65) 
这 就 证 明定 理 的 前 一 断言 ， 定 理 的 后 一 断言 星 然 由 定理 的 前 一 断 
言 推出 ， 因 为 ， 若 包 为 8 的 相合 估计 ， 则 上 亩 所 作 的 论证 对 任 
一 妇 E9 痢 有 效 ， 肥 对 储 林 8€ 昌 都 成 立 届 .6.65)， 这 完成 了 定理 
的 证 明 . 


$2.7. 序 贯 点 估计 


《一 ) 序 贯 判决 的 概念 


我 们 举 一 个 简单 例子 以 引进 “ 序 贯 判决 "这 个 概念 ， 设 起 我 们 
要 对 一 批 产品 进行 拖 样 检查 以 决定 是 否 乾 受 这 批 产品 ， 我 们 规定 
一 个 “抽样 方案 比方 说 , 规定 检查 20 件 随 机 不 出 的 产品 , 若 其 中 
度 品 个 数 不 超 过 2， 则 接受 这 批 产品 ， 和 否则 就 不 接受 ， 这 时 ， 我 们 
用 某 种 随机 化 的 方法 , 从 其 中 抽出 20 件 产品 ,将 其 逐一 检查 , 记 下 


= Ble 


废品 个 数 ， 再 扫 据 上 述 规则 决定 是 否 接受 这 批 产 品 . 

但 我 们 显然 也 可 用 另 一 种 方法 ， 即 第 一 次 抽出 三 个 产品 进行 
检查 . 如果 全 是 废品 ， 则 工作 到 此 结束 ， 面 我 们 宣布 拒 收 该 批 产 
品 ， 车 废品 数 为 6<3, 则 继续 从 该 批 产品 中 抽出 3 一 ?个 进行 检 
查 .， 根据 这 两 次 废品 黑 计 数 决 定 是 拒 妆 产品 还 是 继续 抽样 ， 抽 多 
少 个 ， 这 样 下 去 ， 或 者 到 某 个 阶段 累计 废品 数 超过 2, 或 者 抽 注 
20 个 仍 未 超过 2， 总 之 , 最 多 在 抽 完 20 个 以 后 , 我 们 可 以 作出 一 
个 判决 ， 这样 做 的 好 处 是 很 明显 的 : 例如 , 设想 该 批 产 品 废品 率 较 
高 , 则 一 般 不 用 抽查 到 20 个 , 就 能 作出 决定 ， 

在 此 例 中 , 桩 本 是 分 阶段 抽出 , 究竟 抽样 多 少 , 不 是 事先 能 巴 
知 的 , 而 是 在 使 用 的 过 程 中 决定 的 ， 所 谓 序 贯 判决 , 就 是 指 据 以 作 
出 判决 的 样本 是 按 这 种 分 阶段 ( 序 贯 ) 药方 式 产生 的 情况 、 一 个 序 
贯 判 决 函 数 ,不仅 要 规定 有 了 样本 后 如 何 根据 样本 作 判 决 , 还 需 规 
定 产生 样本 的 规则 ， 就 本 例 看 , 序 贯 判 决 函 数 一 般 有 如 下 的 形状 ; 

] 决定 是 否 作 试 验 ( 观 察 )， 如 根本 不 作 试 验 ， 指 出 采取 那个 
判决 

2* 如 作 试验 , 要 指出 第 一 批 作 几 次 试验 . 

3" 根据 第 一 批 试验 结果 ， 决 定 是 停止 试验 还 是 继续 作 试验 . 
如 停止 ,要 规定 如 何 根据 已 有 试验 结果 产生 一 个 判决 ; 如 继续 作 试 
验 , 要 规定 作 多 少 次 (这 次 数 与 第 一 批 试验 可 以 有 关 , 如 在 上 例 的 
情况 ). 

侍 这 样 下 去 , 直到 作出 一 个 判决 为 止 . 

与 序 贯 情况 对 立 的 是 所 谓 “ 回 定 样本 "情况 。 这 时 ， 需 要 进行 
那些 和 多 少 次 试验 都 是 事先 预定 的 、 而 得 出 祥 本 后 ， 即 根据 之 作 
出 一 个 判决 , 不 存在 继续 试验 的 选择 . 迄今 为 止 我 们 讨论 的 都 是 这 
种 情况 . 

其 所 以 要 考虑 序 贯 抽样 ， 不 外 平 两 个 原因 :一 是 节省 试验 次 
数 ， 前 面 举 的 例子 属于 这 种 情况 ， 另 一 个 关于 参数 估计 的 典型 例 


于 如 下 , 设 变量 下 的 分 布 为 R(9 一 一 , 9 十 二 )， 要 估计 均 亿 0, 把 


Tt AH 


对 三 进行 和 继 独 立 观 家 的 结 黑 记 为 卫 !， 邓 s,，…。 设想 我 们 要 把 
估计 到 误差 不 超过 ”>>0. 一 个 从 直观 上 看 显然 是 合理 而 节省 的 
做 法 如 下 :; 第 一 次 观察 一 1 开车 max{ 尽 4, 下 sj 一 min{ 六 1 瑟 针 


>>1 一 25， 册 试验 到 此 为 止 , 日 用 去 [maxfXi， 瑟 9 十 min {Xa 


瑟 ?j] 佑 计 吕 否则 继 急 观察 互 。， 在 每 一 阶段 , 当 于 i …，X。 已 
观察 后 , 计算 max{f 关 1，…， 下 中 与 min{ 开 1， …， 四 中 之 差 , 若 这 个 
差 1 一 2w, 就 停止 观察 生 用 这 两 个 数 的 平均 值 去 估计 名 否则 继 
续 观 察 站 sd， 直到 作出 决定 为 止 

另 一 个 重要 原因 是 : 为 了 使 判决 达到 一 个 预定 的 精度 , 往往 不 
能 在 固定 样本 下 实现 ， 举 一 个 简单 例子 、 设 变量 政和 ~ 和 Na, o9]， 
4 和 3 都 未 知 。 我 们 想 要 作出 4 的 无 偏 佑 计 乡 使 其 方差 总 不 超 
过 指定 的 s>>0、， 如 果 样 本 大 小 事先 指定 ，. 则 不 论 样本 大 小 多 大 ， 
这 要 求 无 法 实现 因 菩 下 ，…， 四 ,为 NCa, a 中 抽出 的 i 记 样 
本 ,而 总 下 4， …， 正中 为 @ 的 无 偏 居 计 , 则 由 C- 下 不 筹 式 , 知 


VarTteoo (9) > 二 Ge 


由 对 中 可 以 任意 大 , 工 中 不 可 能 对 一 切 史 都 不 超过 固定 的 


a>>0， 我 们 指出 , 车 采用 序 吐 抽样 , 就 可 达到 这 个 目标， 
考虑 下 面 多 作法 ， 第 一 批 观 察 m% 次 ， 得 是 !，…， 玉 wm， 算 出 


Ll 


一 (了 :一 卫 )*， 到 60>0, 记 

d{m1, 1 win) = [oS + (2.7.1) 
([ 中 表示 不 超过 y 的 最 大 整数 )， 然 后 ， 第 二 批 吾 抽 梯 4=d(《 蔗 3， 
wy 吾 由 次 ,得 束 wrd es, .i 记 


3 中 中 


-1 l 
m+d 名 至- 
我 们 证 明 , 吕 为 5 的 无 偏 佑 计 , 县 适当 选择 和 和 o 可 使 
Varieonf 吾 8 
对 任何 &, co 
闫 为 芒 1， 有 到 2 为 大 人 go9 中 抽出 的 ii 样本 ,有 
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For(R|X, +da ) 


(SX ma) 


tol 


一 多 十 mT 
再 利用 & 一 《XY1，…,， 四 吕 与 襄 芝 ;的 独立 性 , 知 
Bo CH) — Boos{ Bt | 1 "0 En))} 
=at Bo [ (SX me) / (mtdCXs, .Xo))]| 


“at Eeon[ 2 Ks— ma]/ Bearld (Xs, … 
二 让. 
完全 类 似 的 方法 算出 
EB, | "ys 至 四 
-To py "x,) 十 29 之 XAdtdor+dra’]. 
从 曾 ( 利 用 襄 XY; 与 6 的 独立 性 ) 


Ea () =Be,on| 人 


n+ ] + 


故 


Varie,o) CX) — Bo, 的 or Te | dr 二 ] 
< 亏 驴 二 下 )- 可 路、 

显然 , 选 mr 或 8 充分 大 , 可 使 此 值 不 超过 a>0. 

在 本 例 中 ,抽样 共 分 两 阶段 ,第 二 阶段 的 样本 大 小 dvr,…, sm) 
与 第 一 阶段 试验 结果 有 关 ， 当 S? 大 时 ， 表 示 总 体 方 差 o? 可 能 较 
大 , 因此 为 了 把 < 个 计 到 一 定 的 精度 ,需要 抽样 次 数 多 些 , 否则 就 
少 些 ， 正 是 这 一 点 保证 了 最 后 的 估计 六 能 达到 指定 的 精度 (在 此 
是 其 方差 不 超过 9). 

其 实 , 在 日 常生 活 及 种 种 科技 活动 中 , 采用 这 种 序 贯 的 方式 作 
决定 的 作法 屡见不鲜 。 在 统计 上 说 ， 产 品 抽样 检查 中 的 Gugu6 
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Romig 复式 抽样 方案 ， 是 这 方面 比较 时 期 的 工作 ， 1945 年 Stein 
对 正 态 总 体 下 (co 中 o? 未 知 时 < 的 推断 问题 提出 了 两 阶段 抽 
样 方案 ,Wald 在 四 寺 年 代 系统 地 发 展 了 一 种 称 为 “ 序 贯 概率 比 ” 
的 检验 法 ( 见 人 3.7)， 玉 ald 并 在 [2] 中 提出 了 序 人 判决 的 一 般 
模式 。 五 十 年 代 以 来 ,， 序 贯 方法 在 统计 各 主要 分 支 中 都 有 了 程度 
不 同 的 发 展 , 结果 散 见于 一 些 文献 和 专著 中 ， 本 书 介绍 这 方面 的 
若干 基本 概念 , 以 作为 进一步 阅读 这 方面 的 文献 的 准备 . 


(二 ) 序 贯 判决 模 速 


在 $1.4 中 我 们 就 回 定 样本 下 的 统计 兰 决 问题 作 了 一 个 大 至 
的 描述 ， 并 在 本 章 有 关 部 分 作 过 若 于 补充 . 当 考 嵌 序 贯 抽样 的 情 
况 时 ， 这 些 概念 有 的 需要 作 一 些 变化 . 本 段 的 目的 就 是 讨论 这 个 
各 是 . 

1. 样本 空间 和 分 布 族 不 失 普 遍 性 , 可 假定 每 阶段 的 试验 次 
数 海 1， 以 及 1， 斑 ，， 蔗 8,… 记 各 次 试验 或 观察 的 可 能 结果 . 为 确 
定 计 , 不 妨 设 每 个 了 ;都 是 一 维 的 .每 个 下 ,都 是 庆 维 信守 1 与 革 
无 关 ) 的 情况 ,无 任何 本 质 差 别 . 因此 , 每 个 ; 取 值 的 范围 可 定 
为 《一 co，co 即 囊 . 在 实际 问题 中 , 有 可 能 了, 只 取 妃 中 某 Borel 
子 集 BB, 内 的 值 ， 且 Bi 可 与 有关. 但 如 在 $1.4( 二 ) 中 所 指出 
的 , 不 失 普 记性 可 假定 每 个 卫 ; 取 什 于 Rl。 具体 观察 那些 互 ， 事 
先 不 能 肯定 , 因此 方便 的 作法 是 将 样本 记 为 

C= (Vi, Va 3，，…)) 
自然 , 在 任何 时 候 所 观察 到 的 , 都 只 是 z 的 有 限 个 坐标 .样本 空间 
为 
={= 0 Wg) oc, $= 1 2, ''.}, 
这 空间 常 记 为 总 -. 

但 在 规定 样本 空间 时 还 必须 指定 一 个 0 域 ， 这 个 o- 域 是 这 

样 定 的 : 称 4 为 we 柱 形 和 集 , 若 存 在 % 维 欧 氏 空间 的 子 集 4。， 至 
$= (Py sy tl 伟人 ) € ds 
4 称 汶 44 的 底 (Base)。 若 底 为 Borel 和 集 , 称 4 为 Borel 柱 形 集 . 
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不 难 验 证 , 一切 Borel 柱 形 集 (对 m=1, 2,…") 构 成 一 个 域 ， 包含 
这 个 域 的 最 小 o- 域 记 为 馈 -。、 称 为 如 .中 揭 Borel 集 村 上 成 的 呈 
域 . 我们 就 取 多 = 作为 用 
无 旁 维 随 机 向 是 
于 二 (RI Ro, 


的 分 布 ， 就 是 及 w = 有 王 上 的 一 个 科 率 测度 ， 如 果 将 这 个 概率 测 
度 局 限于 零 * 的 一 切 %-Borael 柱 形 集 所 成 的 o- 域 名 ,上 ， 则 得 
(1， 旦 9 至 由 的 概率 分 布 . 互 的 分 布 族 仍 记 为 CPo, 8ES). 
若 (P，B8EGB) jw 为 多 rs 上 的 o- 有 限 测度 ， 则 (下; …， 之 
的 分 布 族 CP8, 日 E 也 如 上 因而 可 记 
7 
最 常见 的 情 部 是 至 1， 于 so,，… 为 iid 的 情况 , 这 时 ,车 以 CE 人 EE 全 ) 
记 世 1 的 分布 族 , 则 斑 的 分 布 族 为 
(P= PP x Px PP..., EO0), 
而 (让 4， ， 芥 ) 的 分 布 族 为 
(P= PP x x Py, 9EG)， 
车 (PP,9€O) 1 则 (PP,9€) pm 一 px xD 因此， 
若 记 /人 ws, 0) -dP (ey) /dun, 则 
SP Gps 2 fo, ,a 0) = flow 0). 

忆 后 总 在 这 个 音义 下 理解 了 (wy tow 的 . 

2. 判 天 空间 与 损 先 函数 ”与 画 定 样本 的 情况 无 异 ， 

3. 费用 函数 ” 序 贯 判 亿 问题 与 固定 祥 本 问题 相 比 的 一 个 不 
同 点 是 要 考虑 试验 费用 费用 函数 是 定义 在 桩 本 空间 下 = 及 -上 
的 -个 非 负 画 数 C(x)， 说 得 更 清楚 些 , 在 有 了 停止 法 则 (下 下 面 
定 六 2.7. 了 DD {dA} (4 一 BX Ri XRixX。…) 后， 为 了 给 定 费 用 机 
数 口 (DD), 需要 给 定 一 虑 画 数 {wm sn)}%1， 其 中 O(n 
… 4 为 定义 在 瑟 上 的 非 负 Borel 可 测 函 数 , CO =0 对 一 切 
人 当 击 = 时 ,否则 


人 


a 


Or) 一 Cn (ol ny Ts) 当 w= (Cs, ny ‘0) EAn; 
0%) -co, 当 sE LA 


OO (wy，……，zn) 表示 "试验 在 得 出 41,…， zn 后 停止 "的 情况 下 的 试 
验 费 用 ， 常 见 的 情况 是 Cs(oea，…， 和 如 ) 一 ni0, 0<6e 太 00, 0 为 常数 ， 

4. 判决 卫 数 一 一 停 正法 则 与 判决 法 则 ， 在 序 贯 情况 ,一 个 判 
闫 函数 楼 规 定 两 忻 事情 ， 一 是 试验 在 何 时 停止 ， 这 叫 敌 述 赴 法则 
(Stopping rule); 一 是 在 试验 终止 后 怎样 根据 样本 选 定 一 个 判决， 
这 刑 人 艇 判 天 法 则 .这 两 方面 是 判决 函数 的 有 机 构成 部 分 . 

我 们 给 出 下 面 的 形式 定义 . 

定义 2.9.1， 梁 ,中 一 捉 侍 合 {4s}%o 称 为 一 个 停 下 法则 , 若 ， 

2a. 集 4o，A41，4o，… 两 两 无 公共 点 ，4d。 一 舍 或 办， 

b, 和 集 4 为 %-Borel 柱 形 和 集 , %==1, 2,…:, 即 A, 一 Bnx Rx 
ix-…, 此 处 BB 为 名 维 欧 氏 空 间 的 Borel 车 集 及 称 为 4 的 
“ 底 ” 

一 个 停 直 法 则 实际 使 用 的 方式 如 下 : 车 4o= 免 , 则 不 做 任何 
试验 . 否则 观察 一 次 得 必 , 若 由 属于 目的 底 瑟 , 则 试验 停止 . 香 则 
继续 观察 一 次 得 zs. 一 般 , 在 已 得 es …，m-i 后 ,车 (pb an) 
属于 Aw 的 底 Ba， 则 试验 停止 , 否则 继续 观察 一 次 得 s。 这 样 
下 去 ,如 果 全 部 4 之 并 为 纯 则 迟早 会 停止 ， 介 在 停止 法 别 中 并 
未 明确 要 求 这 一 点 , 因此 有 可 能 试验 无 限 地 进行 下 去 而 不 作 决 定 . 
我 们 要 求 这 种 情况 的 概率 为 0, 不 然 的 话 , 就 没有 任何 现实 意义 ， 

停止 法 则 一 经 确定 , 试验 次 数 入 = 入 (Cw) 作为 w 的 函数 就 询 定 
了 ; 显然 


ND =rn， 若 Ed n=1, 2, 
~oo， 著 2E 一 上 4 
其 分 布 为 
PelN =n) = P(A 1%, Ro) EB), EG, 
P(N~o0) -1— P(N -on). 


$7Te 


只 有 在 PN =o 一 0 时 , 入 才 是 通常 意义 下 的 随机 变量 ， 

我 们 举 两 个 例子 说 明 上 述 概 念 ， 

例 2.7.1， 拿 本 节 ( 一 ) 中 结尾 处 的 例子 来 说 ， 有 刀 一 和 一 … 
= An 一 中 ( 空 集 )， : 


hus={® 一 【oa :TE (ot, 2)) 


[a 
t=1, 2, 
此 处 四 ,一直 窑 开 ,要 的 分 布 为 
Piss (Ni) =0, t= 本 
Pi 一 加 十 区 一 P(E 5), i 1, 2, 


例 3.7.3， 设 并 :, 六。 … 为 iid nt) -oo 
4 一 出 一 由 As= {z= (v1 ra | | 1 2n}, 


A, = 1{s= (m1 Wa 0): a 国 一 ， min mt <1- 27 
- n—1 < 一 1 


max ti— min ml — 2n},，: 
tn 


读者 不 难 验 证 ,这 一 帅 {4s} 确 实 符合 定义 3.7.1 的 要 求 . 
在 此 试验 次 数码 的 精确 分 布 可 计算 如 下 : 显然 ， 
PAN=m = PN — PtN En —l1) 

—P, [max 下 ( 一 min 六 ! 守 1 一 2n] 


—P[ max Xi min ,站 六 1 一 29].。 (323.7. 


Teten—l1 


不 难 算 出 对 任何 外 VU, 一 max 于 :一 main 蔗 ,的 多 度 (对 荆 测 朗 ) 
i Da 31—t), 0<w<l, 


7- | 0， 其 它 %. 


这 个 简单 事实 的 证 明 留 给 读者 作为 练习 , 由 C2.7. 信 可知 
PU) =0=i[1— -2D — Gl) {1 (1 29 
一 1 一 和 一 207 + GD (2 


{2.7.%) 


从 而 
,228. 


P(N=n) =0n—0n 1=4n—1) m0 — 2 n=1i, 立 ， 
(32.7.4) 
这 与 9 无关， 容易 算出 局 PelW 一 nn) 一 I， 由 此 且 易 算出 BC 罗 )， 
Vare(N) 等 。 然 丙 ,在 一 般 情况 下 , 要 算出 1 的 分 布 真 是 谈 何 容 
易 

至 于 判决 法 见 , 与 固定 样本 情 咒 可 比 并 无 差别 , 在 此 就 不 多 费 
笔墨 了 . 

5、 风险 务 数 ”在 序 贸 情况 ， 损 类 函数 与 间 序 贯 情况 并 无 差 
别 : 它 仍 是 一 个 定义 在 日 X 乡 上 的 非 负 函数 工 (9, d)， 然 而 ,在 序 
贯 情况 , 风险 由 两 部 分 构成 : 一 部 分 是 

Ri(0, = S| LO, Se os oo))APY oy, 1, oo), 

(2.7. 
此 处 B。 为 3 的 停止 法 则 {4u} 中 集合 4 的 底 ， 若 4 一双 ， 则 表 
示 判 决 丁 数 8 规定 不 作 任何 试验 而 采取 多 中 某 个 判决 d, 这 时 
R40, 8) -了 (9，d) ， 上 式 也 可 写 为 
Bag, 0) ~ S| LC, 50))dPs to). 
这 部 分 下 示 由 “判决 不 当 ”而 带 来 的 平均 损失 ， 田 一 部 分 是 
Rll, HB [OR = | cad 人 


=- Bf ou,» sd ap (os, «eo, on) 


+ooP(N = co)， 
当 4o 一 多 了 时， 自然 有 Ra(9, )=0， 在 Gam，…, 4) 一 ne 的 情 
况 , 有 

Ralb, 8) —eB,(N). (2.7.6) 
这 一 部 分 类 示 为 达到 一 个 决定 所 需 试验 费用 的 平均 值 ， 总 的 风险 
” Rg, 0) = R00, 8) + Rg, H). 3.7,7) 
然而 , 有 时 在 处 理 疝 题 时 将 这 两 个 风险 分 开 考虑 ， 因为 它们 的 实 


" 22 + 


际 售 义 往往 使 之 难于 放 在 同一 基础 上 去 比较 . 

拿 本 节 ( 一 ) 中 的 最 后 一 个 例子 来 说 ， 著 取 损 失 消 沼 汶 上 (6 
oa DD = (4) », 则 

Ri(e, 0’; 


一 Var on (ET) 二 下 (号 +ox )] : 
a FE ee 


而 ”Rsla, oa ns +3) 
易 见 
mt orm — 1 < Rg, oa RY mtitoo Cm—1), 
(2.7.8) 
最 后 我 们 担 到 : 以 上 讨论 的 全 是 非 随机 化 判决 函数 的 情况 .对 
随机 化 判决 函数 , 一 切 都 有 平行 的 推广 ， 此 处 不 细 述 了 . 


(三 》 序 贯 判决 问题 的 一 般 提 法 


总 的 所 法 有 两 种 ; 一 种 是 在 某 种 最 优 淮 则 下 , 使 RC, 肪 达 到 
最 优化 ， 一 种 是 在 对 (0, 的 ，Bs(0， 二 中 基 一 个 作 一 定 的 限制 
的 条 性 下 , 使 另 一 个 达到 最 优化 . 
例如 , 设 试验 费用 为 常数 ” 我 们 可 以 要 求 
R28, 8) 一 0 各) EE， 对 一 切 EB (2.7.9) 
在 这 条 件 下 使 有 RL(6, 站 达到 某 种 最 优化 , 也 可 以 要 求 
RB, EE， 对 一 切 4€E8, 2.7.10) 
在 这 条 忻 下 使 月 , (8，8) 一 6 加, (NY) 达到 某 种 最 优化 
至 于 最 优化 准则 , 可 以 基本 党 中 讨论 过 的 任何 一 种 ; 在 无 偏 性 
或 不 变性 条 件 下 一 臻 最 优 ; Bayes 或 Minimax 等 。 例如 ， 可 以 提 
出 下 面 药 问题 ; 在 抽样 平均 次 数 娘 ,CN) 友 玉 的 约 东 下 , 找 g( 四 的 
无 偏 估计 六 使 Vare( 分 达到 最 小 (对 一 切 昌 GEB)， 或 在 BN) 所 
下 的 约束 下, 找 使 sup 本 (2 及 达到 最 小 , 等 等 ， 在 以 下 两 段 


* 0s 


中 我 们 将 对 这 些 问 题 作 某 些 较 县 体 的 讨论 ， 斤 而 , 总 的 说 来 , 由 于 
问题 的 困难 ， 目 前 已 知 的 求 出 具体 形式 的 解 的 情况 并 不 多 而 且 是 
散 见 在 大 量 的 文献 中 ， 


(四 ) 序 侦 Bayes 判决 


在 序 贯 判 亚 中 ， Bayes 判决 受到 较 大 的 注意 ,特别 是 在 点 估计 
中 。 这 一 切中 介绍 序 贯 Bayes 判决 的 某 些 基 本 事实 ， 

沿用 前 面 的 记号 ， 我 们 指出 ; 在 序 贯 情况 , 关于 8 的 先 验 分 布 
和 Bayes 风险 等 概念 与 固定 样本 情况 并 无 不 同 . 

假设 给 定 了 一 个 先 验 分 布 上 要 求 关于 的 Bayes 判决 ( 损 
失 、 费 用 、 分布 族 等 当然 答 定 }。 我 们 先 指出 一 个 基本 定理 ， 它 雪 
明 , 序 贯 判决 之 下 Bayes 判决 的 寻求 归结 为 停止 法 则 的 寻求 ， 

定理 和 .9.1. 设 和 为 任 一 判决 函数 ， 其 停止 法 则 为 {444 
而 中 是 这 样 一 个 判决 函数 , 其 停止 法 则 也 是 {4。]}%o, 而 在 一 旦 停 
止 时 , 8° 的 判决 法 则 是 使 后 验 风 险 达到 最 小 ， 则 的 Bayes 风险 
不 超过 车 的 Bayes 风险 . 

证 明 是 明显 的 ， 广 然 停 止 法 则 一 样 , 8 和 字 的 平均 费用 也 一 
样 ， 客 只 需 就 其 风险 的 ,部 分 来 比较 ( 见 (二 )}， 车 以 BB 记 4， 
的 底 ， 而 PYCXs， +…， 天 习 记 (XI,，…， 玉 四 的 分 布 ， 则 任何 判决 
法 则 已 (其 停 引 法则 为 {4 小 的 Bi 部 分 Bayes 风险 为 


Bt) — Bf 50, dm, ,od ap es, », ao) dE (0) 
-Sj jr%, dm oe, WE LAD | B12 tm) 


Xda «0°, tn), 


这 里 Ps(z， …， ww) 为 (op …， mm) 的 绝对 分 布 ( 见 83.3 (二 ))， 
显然 ,如 果 好 [aa ry EE 


fF, ac 0)) E01 m1 2 1) 
~inf | LO, Elad9 | …。 mw)， 


过 31 。 


ee i 


则 2etG) 达 到 最 小 ， 就 是 说 ,在 evzz，…， xn) 使 后 验 风 险 晤 小 时 ， 
Bw (中 达到 最 小 ， 
但 一 般 说 来 , 求 Bayes 停止 法 则 并 非 易 事 ， 在 所 谓 “ 截 断 判 
次 ”的 情况 , Blackwell 和 Girshick 提出 了 一 个 一 艇 方法 . 
定义 2.7.2. 若 一 个 停止 法 则 {4} 满 足 条 件 
| 4 一 由 汉人 人 > (2.7.11) 
则 者 应 的 判决 函数 称 为 截断 型 的 ， 这 表示 , 至 多 只 许 哎 察 到 xx 
为 止 . 
假定 我 们 局 限于 在 满足 (2.7.11) 的 一 切 停止 法 则 中 寻求 
Bayes 最 优 的 , 则 可 如 下 考 呀 : 先 仍 定 次 试验 都 作 ， 则 我 们 观察 
21 “好 wa Wx。 其 后 验 风 险 记 为 
健一 (2.7.12) 
右边 两 项 分 别 表 示 费 用 以 及 由 “ 淹 类 不当 ” 耐 招 教 的 Bayes 后 验 风 
险 . 
设想 我 们 已 观察 了 aa，……zwr- 而 面临 是 否 要 作 最 后 一 次 观察 
的 问题 .如 到 此 为 止 , 遭受 的 员 险 为 下 w (oa …， sry-x), 而 健 续 
观察 一 次 遭受 的 下 均 风 险 为 召 [下 (at …，2x_4 三 四] 。 这 里 期 
望 值 要 对 在 CX1，…-， 革 四 的 绝对 分 布下 ,及 在 全 1，-…， 苹 yi 给 
定时 的 条 件 分 布 去 求 . 车 记 
Cr (m1 zx) =Wy (si, LN); 
Cr- 1 C1 Ty} = min{W yi tty “oe, Ey), 
吾 [ 开 xf , ey, TY. 
则 只 有 在 ax-1 二 到 wi 时， 继续 现 察 了 wy 平均 说 米 才 有 利 。 如 果 
xi 一 玉 w-1， 则 我 们 又 可 以 问 : 是 否 在 观察 到 四，…，xw 时 停止 
更 有 利 。 这样 一 直 追 漳 到 开始 .把 这 种 品 起 总 结 为 … 个 停止 法 则 ， 
由 在 如 下 的 形式 : 定义 Ny Hw-1 如 前 ， 一 般 ， 设 Hy Oy ys yf 
已 定 必 了 了， 则 ar- 定义 如 下 ; 
Oya os Pin yy ey 站， 
Blayv_ yey gw- En) }. 
最 后 , Wo=inf| (9, 四 性 GO)， 而 
所 叶 。 各 
» 32. 


=min{Wo, 有 [eaf 生 四， 
定义 停 呈 法 则 {A 0 二 六 } 如 下 ; 若 一 开 w 则 4 一 名 
而 4;= 中 11 否则 4o 一 中 而 

As= {E= (oo v7), 
j=1, 2, 0 ol, Wm ,m0) = oes, 7 w)}, 
T=1, 2, ,NN. 
显然 这 是 一 个 停止 法 则 ， 仍 以 瑟 记 要 4, 的 底 ， 
定理 多 .7.%， 在 一 切 观察 次 数 不 超 过 站 的 停止 法 由 中 ， 刚 才 
定 文 的 {是 Bayes 最 优 的 , 这 就 是 说 , 对 任何 其 它 这 样 的 停止 法 
则 ?D150, 必 有 


、 
2 Wels ,sO GP lw, ,me) 


> Of Wb, ,odaPiles, 00 (2.7.18) 


这 里 邢 为 由 (2.7.12) 定义 的 后 验 风 险 ， 而 Dw iit 2 为 (2X1 
…， 站 站 的 (在 先 验 分 布下 的 ) 绝对 分 布 . 
证 ， 我 们 将 证 明 ; 对 任何 多 Porel 柱 形 集 4 有 


得 


S| U's wn aP) 《aa Uy 4) 
wy 
-之 | Oi C01, "ny saP(s, Wii 2 人 ， (2 .7.14) 
4 ANB) 
及 蒋 本 :为 iPBorel 柱 形 集 ,= 了 十 4， 0 NN, Ajiis “oe, Ay 两 两 无 
公共 点 , 且 中 ,4 为 关 Bordl 柱 形 集 , 则 
思 
Sots «0, odPkm, 网 
#1 a 
< py | i C1, "yy wi CP, Co 9 my), (2.9.15) 
t=j+1 J A 
以 下 为 简便 计 ， 就 用 m 记 上 (人 0， 等 等 ， 若 局 .7.14) 和 
(2.7.16) 已 证 ， 则 在 @.7.1 少 中 置 4 一 Si j=0, 。…, 次, 并 将 所 
得 结果 求 和 ,有 . 
如 以 下 为 简便 计 , 把 高 的 底 也 记 为 &， 这 不 致 引 起 混 清 。 
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基 ， 到 了 ”条 
一 p 2.7.18 
吝 将 i 2 名 | .aa ， ) 


义 在 外 .7.1 司 中 置 4=8n 8( 不 难 验证 它 满 足 人 2.7.1 本 中 关于 
.rd Ay 的 要 求 )， 有 


在 下 N 
误 ,名 j Hen Bs wdlse 启 > | mon lt 人 人 1 
将 人 2.7.16) 与 己 .7.17)? 相 加 , 得 


和 Ey . 
> 人 人 >) | mdaP. (了 .7.13) 
j= 人 BN Hy 


hi=0 4 SnBy 


因为 在 电 上 有 == 到, 而且 总 成立 m 实生。 由 (2.7.19) 特 
疡 癌 np WdPy 福 己 | WaP, 


=0. Sen B, 
即 > fi WaPy< S| WdPe. 


此 即 人 .7.193) . 
因此 ， 定 至 揭 证 明 归 结 为 证 明 避 .7.14 和 和 (7.1T5)， 显然 ， 
(2.7.14) 当 i 一 本 时 成 立 。 用 个 推 归纳 法 ,对 <， 
NR 机 
a | aaPt+ 六 
但 在 集合 Brra Ue U By 上 ; 有 
ou oo, BD) BE Ea Tis, ze, Ri), 


| mdP, (2.7.19) 
AnHy 


以 此 代入 (2.7.19) 的 右边 , 并 用 倒 推 归纳 假设 (就 是 (人 2.7.14 当 电 
改 为 4 工时 对 )， 即 扼 (2.7.14) 成 立交 仆 地 证 明 人 .7 .15)， 定 
理 证 毕 . 

对 一 般 的 没有 截断 限制 的 Bayes 问题 , 不 难 设想 , 其 Bayes 停 
止 法 则 责 世 这 样 得 到 先 在 克 处 截断 ， 求 出 其 截断 Bayes 停止 法 
则 ， 再 令 -co。 更 确定 地 ， 设 在 三 处 鹤 断 时 ， 上 面 求 得 的 函数 
ao，…，Cw 记 为 ojw， 3=0, 0 则 易 见 序 列 {ow， N=y+1, 
5 十 2 小 单调 非 增 . 记 oy = Him ou 定义 


时 天 3 二 


B;= {2: Wm + ot) > (m1, Wb 0), t=0, 1, *., 了 一 也 

Wy 一 四 
”为 无 截断 限制 时 的 Bayes 停止 法 则 。 Blackwell 和 Girshick 在 一 
定 条 人 性 下 严格 地 证 明了 这 一 事实 ， 

在 不 少 情况 下 ，BHBayes 停止 法 由 本 身 就 是 截断 型 的 ， 王 面 的 
定理 属于 这 称 情 癌 。 

定理 &.7.8. 若 当 太一 co 时 费用 函数 Cr (vi …， zw) 一 致 地 
趋 于 ceo, 但 对 固定 的 六 , Oytmy; ……， gw) 保 持 有 界 ， 耐 由 “判决 
不 当 ” 带 来 的 后 验 风险 ry (tel …， 2 一致 她 趋 于 0( 见 (2.7.12) 
式 ), 则 Bayes 停 上 法 则 是 截断 的 ， 又 若 Ox (wt，…， wy) 一 而 后 
验 风 险 mt … wy) 只 与 二 有 关 ， 则 序 贯 Bayes 判决 是 固定 样 
本 的 . 

证 ， 由 假定 知 存在 入 0 致 9ar(er Yiw) 所 1 对 任何 ly 
这 时 , 如 只 作 去。 次 试验 , 则 后 验 风 险 ( 包 括 费 用 ) 不 超过 
80Pp Ow, (Wi,，"…，zyw,) 十 4 一 可， 再 由 假定 知 寡 在 Ni 致 inf Oy (wi， 
0 全 当真 关 友 :这 说 明 , 作 和 i 次 荆 更 多 的 试验 , 肯定 不 
如 只 作 Ho。 次 有 利 。 因此，Bayes 判决 的 停止 法 则 最 多 只 允许 作 
wx 一次 试验 ,因而 是 截断 的 . 

如 果 Cr al …，2t) 二 0N 而 rrfci 2 一 ar， 则 作 克 次 
试验 的 后 验 风 险 (包括 费用 ) 为 W 上 +Tam 与 试验 结果 无 关 ， 设 
oN oT ow int [oN 十 av] 出 显然 最 优 的 办 法 是 作 六 o 次 试验 , 因而 
序 贰 Bayes 解 退 化 为 固定 样本 的 . 

举 两 个 例子 说 明 本 定理 的 应 用 . 

例 23.7-.3， 设 瑟瑟 2， … 为 i， 证 1 的 分 布 为 

P(X=1)=0, P(X-0) -1-0, 0<0<1. 
设 先 验 分 布 为 五 (0, 1), 费用 酒 数 为 Ow (9 ，…，ww) oN ,而 损失 
画 数 为 卫 由 下 一 .车 以 了 记 加 1 十 … 十 蕴 j, 依 例 2.3.1 
的 计算 , 若 试 验 3 次 后 停止 , 则 日 的 Bayes 信 计 为 (T+DDAC3+2》 
其 后 验 风险 为 


二 


a 


(了 十 二 17 一 了 十 13 
Ei 
{7 二 1)2 
TT 
当 -xoo 时 趋 于 0， 根据 定理 2.7.8, 序 贰 Bayes 梢 计 必 为 截断 
型 的 . 
不 难 验 证 ; 若 损失 函数 取 为 
LE DD= 0 DY), 00<1, (2.7.21) 
则 序 贯 Bayes 估计 退化 为 固定 样本 的 ( 当 作 了 次 试验 时 , 后 验 风险 
(包括 费用 ) 为 各 十 子 ). 
例 2.7.4， 且 1， 及 … 为 i 记 样本 , Zi~N(0, 1)， 一 oo<9 
二 co、 损 尖 晴 数 与 赐 用 隐 数 与 上 例 一 样 ， 先 验 分 布 为 久 (O,， 7. 
根据 例 2.8.3, Bayes 居 计 要 求 ， 在 作 了 次 试验 后 停止 时 ， 用 
估计 量 


TO， DN = — 


HK, 1 BN jr (ja 十 全 。 
此 处 时 ;= 子安 了 后 验 风险 (包括 费用 ) 为 


了 和 
je 
出 此 智 的 序 贯 Bayes 估计 退化 为 男 定 样本 的 . 

然而 , 除去 这 些 简单 情况 外 , 要 得 出 序 贯 Bayes 估计 的 具体 形 
式 一 般 都 不 易 : 近年 来 , 渐 近 理论 受到 一 定 的 注意 例如，Biekel 
和 Yahav 发 展 了 一 种 廊 亩 渐 近 逐 点 最 优 ”(&PO) 的 序 册 Bayes 
估计 理论 , 这 大 致 可 以 说 是 在 费用 趋 于 0 时 的 极限 情况 ,其 详 不 能 
在 此 介绍 了 . 


Wlws, 0， 一 果 十 (2.7.22) 


(五 ) 序 贯 项 ihnimax 估计 


在 序 贯 情况, 定理 2.8.5 和 2.8.6 仍 适用 ， 然 而, 要 求 出 序 贯 
Minimas 佑 计 获 要 更 繁复 的 论证 ， 我 们 举 几 个 例子 . 

例 3.7.5. 对 例 2.7.8, 车 损失 函数 为 亿 .7.21) 到 先 验 分 布 
为 恕 (0, 1)， 则 Bayes 估计 为 固定 样本 的 , 样本 大 小 六 满足 条 件 


+ 265+ 


Fo+ 广 -~mdn( 和 + 本 ) 
Bayes 估计 为 (入 1 十 … 十 至 wn) /NN， 此 估计 的 风险 为 常数 。 因此 ， 
依 定 至 2.8.5, 这 也 是 6 的 序 贰 Minimas 信 计 . 

和 例 2.7.6， 就 例 2.7.4 而 言 ， 若 取 先 验 分 布 为 入 (0, 不 )， 则 
Bayes 估计 的 Bayes 风险 为 


fF 
b=min [® tr (2.7.23} 

易 见 1 
lm ij。 一 min | 0+ 地 | (2.7.24) 
但 车 取 固 定 样本 估计 ,其 祥 本 大 小 好 满足 
co 二 天 = minf w+ 了 (3.7.25) 


且 用 帖 诗 醒 ( 瑟 :十 十 亚 四 /六 则 其 风险 等 于 一 个 常数 ， 即 
(3.7.2B) 的 右边 ， 根据 征 理 2.3,6 这 个 估计 就 是 吕 的 序 贰 
Minimax 枯 计 ， 

另外 ,Bl7 志 对 例 2.7.6 中 损失 函数 较 一 般 的 情况 , 即 9 中 
-W868 一 8D), 碾 ( 区 在 20 非 降 , 得 出 8 的 Minimaz 合计 , 它 
也 是 圈定 样本 的 ，KKiefer 对 及 1, 下 >, … 为 ia 二 1 一 吾 人 0 四, 损 
失 为 荆 中 二 一 四 一 四 /9 费用 为 Cx( 卫 1 …， 了 wn) 一 0N 的 情 
视 求 得 了 6 的 序 贯 Minimax 估计 ， 它 也 是 固定 样本 的 . 本 书 作 
者 求 得 了 (4 吃 中 心 号 的 序 贯 Minimax 估计 (损失 为 
(2.4.15 ,费用 为 Cy( 工 5 及 nw) 一 6 条), 它 也 是 国定 样本 的 且 有 
(2.4.16) 锡 形式 ，Bly 志 提供 了 一 个 不 退化 为 固定 梯 本 的 序 贯 


Minimax 估计 的 例子 , 就 是 水 节 (一 ) 中 关于 个 计 R(9 一 于 ,9 十 雪 ) 
中 的 6 的 问题 


和 


第 三 章 假设 检验 


$3.1. 基本 概念 


(一 ) 假设 和 假设 的 检验 


设 变量 部 的 样本 空间 为 (好 ， 轨 由 ,分布 艾 为 VC EB),， 这 
就 是 说 ,对 某 个 8E8, 节 的 分 布 为 三 

定义 名 .1.1. 设 Br 为 马 的 一 个 非 空 误 子 集 ， 则 命题 : “对 
某 个 IEBm 五 的 分 布 为 Py,” 称 为 关于 蕊 的 分 布 的 一 个 假设 . 

一 般 , 我 们 将 上 述 假 设 就 简 记 为 “9 ESBa”， 或 用 一 个 记号 ， 例 
如 五 来 记 它 ,这 样 我 们 可 以 说 “ 仿 设 五 ”如果 对 的 分 布 为 刀 。 测 
名 EBr， 出 我 们 说 "假设 成 立 ” 车 如 EE 人 By,， 风 说 “假设 不 成 立 ”, 

记 @r= 昌 一 Gs, 命题 “9EGr” 称 为 假设 9E9 的 对 立 恨 设 ， 
为 了 明确 地 标 出 这 一 点 , 经 常 把 一 个 假设 检验 问题 记 为 

HA 3.1.1Y 
或 简 记 为 及 < 及 ， 于 一般 地 ， 也 可 以 把 Br 的 任 一 子 集 作为 对 立 
假设 ,例如 ,要 检验 入 (@, 1) 中 的 8=0， 对 立 假设 是 96¥0， 但 我 
们 也 可 能 上 只 对 >0 一 部 分 有 兴趣 , 这 时 可 提出 问题 
=0>0>0. 
与 对 立 假设 这 个 名 词 相 应 ,一 个 假设 常 称 为 “ 零 假 设 ”, 

对 每 一 个 具体 假设 ， 可 以 作出 的 决定 有 两 个 ， 接 受 这 个 假设 
(do) ,或 否定 这 个 殷 设 (&4)。 至 于 采取 那个 决定 ， 是 根据 变量 也 
的 观察 值 即 样本 2， 所 谓 “ 检 验 ” 一 个 假设 , 就 是 制定 一 个 规则 , 使 
对 每 个 zE 吧 ， 这 个 规则 唯一 地 次 定 是 接受 六 是 否定 所 提 假 设 ,每 
个 这 样 的 规则 称 为 一 个 检验 ， 显 然 , 这 等 于 把 样本 空间 和 分 为 两 
部 分 : 4 和 由 = 到 一 4 使 当 %EA4 时 否定 假设 ,而 当 wE de 时 接 
受 假设 .4 称 为 检验 的 否定 域 . 这 样 , 给 定 一 个 检验 , 等 价 于 给 定 


* 号 3B 


其 否定 域 ， 从 判决 函数 的 观点 说 ,一 个 检验 就 是 一 个 定义 于 沼 上 
取 值 于 {to, 出 } 的 冰 数 83， 而 否定 域 就 是 {2:8(2) =}, 

根据 $1.4 所 述 “ 随 机 化 判决 函数 ”的 恩 想 ， 可 以 提出 随机 化 
检验 的 概念 ， 每 得 到 样本 2 后 , 以 一 定 的 概率 中 (om 《与 有关) 理 
定 零 假设 ,而 以 概率 1 一 由 (am) 接受 零 假设 . 这样, 是 否 接 受 零 假设 
的 决定 分 两 阶段 作出 ; 第 一 阶段 对 叉 观察 得 样本 wm 第 二 阶段 作 
一 个 试验 ， 这 试验 有 两 个 结果 4 和 名 其 概率 分 别 为 四 (2) 和 
1 一 路 (w) ， 若 试验 结果 为 4， 则 否定 零 假设 , 否则 接受 零 假 设 ， 

定义 8.1.2、 设 $2) 为 定义 在 权 上 的 罗 o- 可 测 函 数 ， 满 足 
条 件 0 二 由 (os 出 称 由 人 w) 为 一 检验 .每 得 到 样本 “后 ， 以 概 
率 由 人 否定 零 假设 PEBa， 以 梳 率 1 一 多 (o 接受 9EBn. 若 
$e) 只 取 日 与 1 为 值 ， 则 检验 吕 是 非 随机 化 的 ， 其 否定 域 由 满足 
条 件 由 (oo 一 的 那些 2 构成 . 


二) 两 种 错误 与 检验 的 功效 函数 


为 了 评价 一 个 检验 的 好 坏 ， 需 要 引进 一 定 的 损失 函数 . 由 对 
判决 空间 多 内 会 两 个 点 册 和 号， 损失 函数 研 以 更 方便 地 记 为 
的 和 0: 

Lo = I, do), DW =L0, a). 
对 假设 窒 验 问题 (8.1. 锋面 盲 ; 当 89E65 时 ,判决 由 是 正确 的 ; 而 
当 8E€ 侣 5 时 ,判决 硬是 正确 的 ,所 以 , 自然 地 可 以 规定 
Lo =0, BOE 1 =0, GEOF (3.1.2) 

如 果 86e5 而 我 们 采取 判决 &s, 即 零 假设 瑟 本 来 正确 ,但 被 
否定 了 , 这 时 称 犯 了 第 一 种 错误 ; 如 果 9EBx 而 我 们 采取 判决 do， 
即 五 不 正 蚀 ,但 被 接受 了 , 这 时 称 犯 了 第 二 种 错误 。 粗 应 地 有 

oO >0YBIEQr 天 (从 >0 当 昌 EBr 
但 和 五 (0) 具体 如 何 定 法 , 则 无 一 定 规则 可 循 ， 自 然 地 可 
以 设想 , 对 不 同 的 9EBx, 决定 加 错误 的 程度 也 不 一 拌 ， 比 方 说 ， 
分 布 族 为 玉 8, 四 ,考虑 检 验 问题 
taE00O >0, 


ee et ee 


TY 


如 果 当 9 一 100 时 接受 零 假 设 9<0, 其 错误 程度 应 该 比 当 9 一 1 时 
接受 9<0 为 大 ， 因此 ， 在 本 例 中 ，Zo(b) 在 (0, o0) 上 应 规定 为 
一 个 非 负 非 降 的 函数 ， 类 似 的 讨论 对 五 (9) 在 @x 上 的 规定 也 成 
立 ， 然 而 , 出 于 历史 的 原因 , 以 及 简单 化 和 直观 意义 的 考虑 , 现 有 
理论 大 部 分 是 在 

Tn =4>0, BEBr; 本 [的 一 下 > 和 BEC (‘3.1.3) 
的 假定 下 发 展 的 。 这 意味 着 , 只 注意 判决 是 否 有 铺 , 而 不 计 其 “ 严 
重 程 度 ”. 

设 加 (2) 为 假设 检验 问题 (3.1. 了 ) 的 一 个 检验 ,而 损失 西数 按 
(3.1.2)，(8.1.3) 规 定 , 则 不 难 算出 史 的 风险 函数 为 
BEG(X)], 0€E0s, 


A 0c0r 1 
因此 , 风险 函数 五 完全 由 
B= Elgbtm)]l, EG (3.1. 


所 决定 。 这 样 , 如 果 按 (8.1.2)，(3.1. 引 规定 损 尖 , 则 我 们 只 需 考 
周 幅 .4. 情 所 决定 的 GO 就 够 了 ， 

定义 .1.8. 设 吓 为 但 .1. 了 的 一 个 粹 验 , 则 由 (3.1. 防 所 定 
之 的 函数 B84 09) 称 为 由 的 功 将 丽 数 (Power funetion). 

显然 , Bs (办 就 是 当 三 的 分 布 为 Po 时 ， 零 假设 被 否定 的 概 
率 . 在 中 为 非 随机 化 的 情况 , 若 以 44 记 其 否定 域 , 则 

BMD=P (DD, EG. (3.1.6) 

因此 , 当 6€ Bz 时 ， B06) 为 犯 第 一 种 错误 的 概率 。， 当 6 EGBs 时 ， 
1 一 B,(9) 为 犯 第 二 种 错误 的 概率 . 


(三 ) 控制 第 一 种 错误 概率 的 原则 , 检验 的 水 平 


从 上 一 段 的 分 析 轩 出 : 在 选择 一 个 检验 时 ,希望 其 功效 函数 在 
零 假设 Br 上 尽 可 能 小 , 而 在 6r 上 尽 可 能 大 , 然而 , 如 果 试 验 规模 
固定 ， 这 二 者 是 有 冲突 的 ， 我 们 不 能 同时 使 得 功效 请 数 Bs (外 在 
Ba 上 不 超过 任 给 的 >>0, 而 在 Bx 上 不 小 于 任 给 的 工 -9 < 工 

历史 上 和 习惯 上 处 理 这 个 问题 的 方法 是 给 定 一 个 9,0<a<1, 


+ ds 


要 京 
有 (的 二 上 WOEB, 《他 .1.7 
即 于 求 犯 第 一 种 错误 的 概 罕 不 超过 <。 在 这 个 约束 下 使 8B,(o) 在 
@r 上 尽 可 能 大 ， 这 叫做 控制 第 一 种 错误 根 率 的 原则 . 
定义 8.1.4. 设 力 为 (3.14.1) 的 一 个 检验 ， 若 对 某 个 w 0&a 
<1， 其 功效 函数 满足 (3.1.7)， 则 称 e 为 检验 由 的 水 平 ， 而 称 史 为 
一 个 水 平 & 的 检验 ， 
因此 , 水平 < 检验 的 意思 是 
sap Bs 0) <a, (3.1.8) 


上 式 左 边 的 量 可 称 为 由 的 真实 水 平 . 

在 通常 应 用 中 , 常 取 a= 0.01, 0.05, 0.10 等 作为 水 平 ， 这 种 
划一 的 规定 对 于 造 表 有 方便 , 但 其 它 就 没有 什么 特别 含义 了 . 水 平 
的 选 定 应 考虑 到 问题 的 性 灰 及 两 种 错误 后 果 的 严重 程度 .将 4 定 
得 很 低 移 习惯 使 犯 第 二 种 错误 的 可 能 性 大 为 增加 ， 这 常 是 不 可 取 
的 、 因此， 如 有 可 能 ， 在 选 定 水 平时 应 参考 f(D 在 Bx 上 的 值 . 
B00) 在 Bz 上任 一 点 9 处 之 值 , 称 为 检验 由 在 这 点 的 功效 


§ 3.9， 一 致 最 优 检验 (UMP 检验 ) 
(—)Neyman-Pearson 基本 引 理 


根据 前 节 所 谈 控 制 第 一 种 错误 概率 的 原则 , 给 定 a 以 后 ,我们 
只 能 考虑 满足 约束 (3.1.7) 的 检验 由 在 这 个 约束 之 下 ,项 望 
B99) 在 Br 上 愈 大 便 好 ， 出 此 自然 地 产生 下 面 的 定义 . 

定义 3.2.1， 设 少 为 (3.1. 才 的 一 个 水 平 4 检验 .车 对 (3.1.1) 
的 任何 水 平 a 检验 $, 必 有 

Bs(0) > 全， 对 任何 9E@u， 

则 称 中 为 (3.1. 册 的 一 个 水 平 & 的 一 致 晤 优 检验 (Uniformly Most 
Powerful Test, 和 饮 称 UMP 检验 ). 

如 果 UMP 检验 存在 , 则 从 功效 最 大 的 角度 狸 ， 自 然 应 该 使 用 


rr LL 。 


be | 


这 种 检验 ， 然 而 ，UMP 检验 的 存在 是 少 有 的 例外 ， 在 Br 只 包含 
一 点 的 场合 ， 可 以 证 明 UMP 检验 必 存 在 (在 某 些 很 一 般 的 条 件 
下 )， 而 在 6x 也 只 包含 一 点 的 场合 , 则 可 以 得 出 UMP 检验 的 具 
体形 式 , 这 就 是 Neyran-Pearson 基本 引 理 的 内 容 . 
设 变量 下 的 样本 空间 为 (2 鹏 考虑 假设 检验 问题 : 
互 : 互 的 分 布 为 Pasy 反 ， 左 的 分 布 为 已 (3.2.1) 
不 失 普 记性 可 假定 Py 和 PP 都 对 有 xs 上 革 不 o- 有 限 测 度 凡 六 绝 
对 连续 . 事实 上 , 只 须 取 闫 = 忆 十 亚 就 行 . 记 po (89) 一 dPo(@@) /dp 
mm) 一 dP (2) /dw， 不 失 普 遍 性 可 认为 对 任何 gE4, pw) 和 
pp (2) 不 同时 为 0 (否则 可 将 多 去 掉 适 当 的 一 部 分 )。 又 在 以 下 的 
讨论 中 , 六 理解 为 co 当 @>0. 
定理 3.2.1.(Neyman-Pearson 基本 引 理 ). 任 给 9 三 a 地 1, 则 
他 对 检验 问题 (3.2. 力 , 必 存 在 一 个 检验 内 满足 条 件 
1， 当 (0 /po (wm) > 上 
机 4 四 -| 当 人 (四 /pm 四 <h. 
b. Botg 01 | po $ ane) = (3.2 .3 
(这 表示 中 的 真实 水 平 为 a, 叉 在 (3.2.2) 中 ,为 茶 个 常数 .) 
Giy 任何 满足 (3.2.2) 和 (8.23.8 的 检验 加 是 (3.2. 了) 的 水 
平 a 的 UMP 检验 . 
fiiiy 车 由 为 昌 .2. 了 DD 的 水 平 s 的 UMP 检验 ， 则 对 某 个 常数 
上 ,中 必 满 足 届 ,2.2) (4. 9, 由 ,及 若 
BX) PG) <1 (8.2. 
则 由 必 满 足 (3.2. 如 . 
证 ， 当 a=0 或 a=1 时 ,这 定理 的 结论 明显 成 立 (但 6 旬 许 取 
ce 为 值 )， 因 此 以 下 假定 0<a<1. 
GD) 定义 
h(0) = Po Cp (ma /po lt) Ee, Oo<o0, 
则 io) 在 0<o<oo 非 降 , 有 连续 , 且 limh(0) 1， 先 设 h(0) <1 
有 


(8.2.2) 


一 zc， 网 存在 并 0<k<o0， 致 ~0) 夺 1 一 0, RCE 之 1 一 gg。 车 


k=1—6, 则 显然 ， 
4@-| pu) /po 8) >b, 
0， 当 和 (9) /po(o) < 
满足 介 .2.2 和 局.3.3). 车 真 (人 > 工 一 a 财 
1, 当 pi Cv) /po (人 >h, 
Po) | BE FD, Sp /mh (8-2.6) 
0， 当 入 (ojpo (网 一 
满足 (3.2.2 和 (3.2.3), 车 jhO) 一 1 一 a, 则 在 (8.2. 辐 中 到 =0, 
所 得 (v2) 仍 满足 (3.2. 咏 和 (8.2. 划 。 若 及 0)>>1 一 a， 则 只 须 在 
(3.2.6) 中 取 一 0, 同时 将 万 一 h(E 一 0) 政 为 C0) 即 可 . 
Gi) 现 设 少 满 中 人 .2. 分 和 (8.2.3)， 而 外 为 二 .3.3 的 任 一 
水 平 “的 检验 ， 记 
B+={r, BOO>POY, SS 人 和 的 <] (8.2.7) 
则 在 S+ 上 ,由 人 a) 炎 0， 因 而 由 (8.2. 泡 知 全 攻 之 hk 网 理 在 上 
PUD) + 
有 人 名 hy<b， 因 此 在 +U8- 上 总 有 
(由 (四 一 区) (pl0) —b po lm)) >0, 


所 以 | 0) Col) — hpo (0) ) dno) 
-| $00) $0) (p00 — hp ors) >0, 


从 而 人 —$ 0) pads) 
>8| ,$0) -$0)) po dye) 


kBoth I) — Bol$ (XZ)1) >0, 
(因为 Bo[( 了 2)] =w 而 Bol$ (IY)]<a, 上 >0.) 所 以 


Bg 3) =| $n dp FOPOd -BE)], 
因此 中 为 水 平 a 的 UMP 检验 ， / 


(3.2. 辣 


mde 


1 


(i) 设 多 为 全 .2. 力 的 任 一 水 平 & 的 UMP 检验 ， 根据 已 证 
的 全 ,存在 中 满 导 人 .2. 人 和 (人 3.2. 且 , 仍 以 &，S- 记 由 他 ,2 站 
定义 的 集 而 SB=S+US-， 记 

Bi SN {sm po) /po loD) FD 
车 AS >0, 则 因 在 中 上 有 
(gm) 一 让 (和 的 — kg tm)) >0, 
将 有 
人 四 -GD 人 四 = 可 加 ji 


-| ($0 -B60)) (plo ~ kro (de>0. 


由 此 将 得 责 [ 由 (四 ]>> 凋 [ 访 ( 人 人]， 与 市 为 (3,2.1) 的 水 平 w 的 
DMP 检验 地 盾 ， 这 说 明 jC57) =0， 也 就 是 说 ， 在 集合 {x: 由 (四 
一 0}U {z; $ (2) 一 1} 上 ,用 (0) 一 名 (ce) (a. e, 向 ,这 证 明了 韶 适 
合 (3.2.2) (&. 8@. /0). 
现 设 人 .2. 涩 成立 车 本 [ 户 ( 匡 )] <a, 令 
$m 一 Pain fl, Bw) + a— Bof$ (FY), 

则 有 Bo[$( 卫 )] <a, 妈 加 为 术 平 a 的 检验 ， 且 对 一 切 #E2 
四 () 祈 直 ()。， 又 由 (3.2. 攻 知 Fi(fz: 由 ( 四 > 溃 (oO 因而 将 
有 [$C 了 )] 沁 加 [ (了 )], 这 与 省 为 (3.2. 二 的 水 平 a 的 UMP 
检验 矛盾 ， 定 理 证 毕 . 

系 8.2.1. 车 中 为 3.2.1) 的 水 平 a 的 UMP 检验 ， 则 必 有 
(XX)]>>a 车 0<a<l 而 Po 关 P( 基 存 站 4658 致 P(A) 
Pt))， 则 必 有 有 Bilp (FE) >a. 

证 . 办 二 a 是 一 个 术 平 g 的 检验 ,而 Bi[&y()] =a， 故 由 
中 为 UMP 检验 知 可 [4$( 下 )] 之 如 [@()] =a, 若 后 两 条 件 满足 ， 
而 孕 1 ( 习 )] = 则 加 二 a 为 水 平 a 的 UMP 检验 , 故 由 定理 的 
ki 这 知 四 应 有 (3.2.2) 的 形状 ,对 菜 个 如 由 于 0 关 a 关 1 出 

0) /of 人) 一 下 (a. e. LY). 
这 只 有 在 下 =1 且 Po= Pi 时 才 可 能 , 与 Pox Pi; 了 矛盾， 这 证 明了 
所 去 的 结果 . 
“odin 


人 RE Pp 


由 8.2. 分 看 出 ， 对 侣 ,2.1 的 UMP 检验 加 随机 化 最 多 内 
在 集合 
{re p/p = (3.2.8) 
上 是 必要 的 ， 当 及 的 分 布 为 连续 型 时 , 往往 象 人 8.2.8) 这 样 的 集 
会 的 概率 为 9, 这 而 随机 化 根本 不 必要 。 在 下 为 离散 分 布 时 , 为 
了 使 检验 的 真实 水 平等 于 给 定 的 ma 有 必要 在 形 如 全 ,3.8 的 集 上 
实行 随机 化， 但 也 可 以 适当 调整 a 以 避免 这 一 点 ， 和 做 法 是 把 集 
(83.2.8) 分 为 两 部 分 Cai， Os, 而 邻 由 (四 一 00 当 zEC， $2) = 了 
当 2%ECs， 在 实际 应 用 中 为 了 避免 随 袖 化 , 总 是 使 用 这 个 方法 ， 


《二 ) 单调 似 然 比 分 布 族 


定理 3.2.1 的 主要 作用 并 不 在 于 直接 应 用 于 实际 问题 中 ， 因 
为 在 实际 应 用 中 , 象 全 .2. 蕊 那样 零 候 设 和 对 立 假设 都 只 包含 一 个 
分 布 的 情况 , 是 不 常见 的 ， 这 个 定理 的 作用 , 在 于 它 是 在 更 复杂 的 
情况 下 寻求 UMP 检验 或 其 它 某 种 最 优 检验 的 一 个 工具 . 本 段 就 
是 一 个 例子 . 
设 于 的 分 布 族 为 {fw 外 (内 ，9E9), 日 为 妨 = (一 co 
00) 上 的 一 个 子 集 ， 如 果 存 在 统计 量 人 (wm), 使 对 尾 何 负 << 扣 (都 
属于 全)， 比 了 (zc， pa /f(r 抽 ) 作为 w 的 活 数 ， 只 依赖 于 工 (x) 且 
是 了 人) 的 非 降 函 数 , 又 不 同 的 8€ 台 对 应 于 下 的 不 同 分 布 ， 则 称 
f(r 全 Qlw), 68EB} 为 单调 似 然 出 分布 族 , 简 记 为 MLR 族 , 
定理 8.2.2. 设 {f(s 加 叹 ( 人 人 ，9E 时 为 一 个 MLR 族 ， 
EB 是 >o} 门 息 非 空 ， 则 对 假设 检验 问题 ， 
H. mh, EO 本， 有 > 加 EB 《3 .2 .的 
及 仔 给 wm 0 一 a<T 有 
ti) 在 在 形 如 


I， 当 T(w) 6 

so 当 TC) = 0, (3.2.10) 
| 0， 当 Tp) <o 

的 检验 (r, o 为 常数 , 0<r 志 了 D, 满足 条 件 


= D5" 


Bo {tA} =a. (8.32.11) 
且 这 样 的 究 验 是 {3.2. 旨 的 水 平 & 的 UMP 检验 ， 
Qi 以 后 (内 记 和 由 (3.2,10) 所 定义 的 检验 的 功效 函数 ， 风 
BD 在 9 上 非 降 , 如 在 熙 , 68E@ 0<8( 的 < 之 二 上 严格 上 盘 ， 
GiD 对 和 任何 有 < 《io 中 的 户 ( 扩 在 一 切 满 足 条 件 (3.2.11) 
的 检验 的 有 中 达到 最 小 值 . 
证 . 全 仿 定 理 3.3.1 们 的 记 法 ,不 难 和 证明 存在 形 如 (3.2.,10) 
的 检验 中 满足 (3.2.1DD， 实 际 上 , 为 此 内乱 取 名 满足 
了 Po > Sat Pe (4) 0), 
再 适当 地 天 定 * 即 可 . 
现 设 中 满足 8.232.140) 和 C3.2.1D)。， 任 取 负 这 机, 负 E9, 考虑 
检验 何 题 
H', =r EK', ~, (3.2.12%) 
车 记 了 (w, 后 ) Fa Bo)| zewy=o=£， 则 由 MLR 族 的 定义 及 史 满足 


{3.39.10), 立 得 
ye 位 fs BA em, ty) >h, 
0,， 当 下 (w, Bi) /fF (%, Oo) 一 下 
由 3.2.11) 知 由 为 (3.2.12) 的 一 个 水 平 汪 的 检验 . 故 由 定理 
3.2. 工 知 , 加 为 (3.2.12) 的 水 平 & 的 UNMP 检验 、 以 有 人 记 册 的 
功效 范 数 ， 我 们 证 明 840) 满足 本 定理 的 《让 .车 这 一 点 证 上 明了 ， 
则 加 曾 后 一 结论 也 得 证 ， 因 为 由 (说 知 , 则 不 权 对 了 匡 '<> 并! 为 水 
平 & 的 ,对 是 心 及 也 是 水 平 & 的 ,再 由 名 为 瑟 '*> 上 ' 移 UMP 检 
验 , 知 它 也 是 五 <*> 的 UMP 检验 . 
谷 证 8(9) 满 足 ( 边 ， 任 到 由 天 卸 (都 属于 全， 考 由 检验 问题 
H'".0=0 er EH= 9. 
用 证 明 ( 刻 的 前 半 的 方法 得 出 : 史 是 旦 "<> 琶 "的 水 平 为 BC901) 的 
DUMP 检验 ， 其 在 后 点 的 功效 为 有 (外 )， 依 系 3.2.1， 邵 得 BO 
号 Bt 这 证 明了 有 Bt) 为 非 降 的 . 又 因 历 产 擅 时 分 布 Po 于 Po， 
由 系 3.2.1 知 ,只 要 0<B0B) <1, 必 有 有 9 一 8 ， 这 完全 证 
明了 (四 , 因而 他 ， 
e 


{83.2.18) 


em a en 


为 记 G0D, 任 取向 之 0,, 者 左 检验 问题 
H" = rE".0= 6, {3.2.14) 
则 用 证 明 名 的 前 举 的 方法 得 知 ; $ 为 此 问题 的 水 平 为 8(94) 的 
UMP 检验 , 其 在 8 处 的 功效 为 B(go)， 故 若 市 为 任 一 检验 ,满足 
Eo [FR)] =a= BOO) BL BolB (TI <AO, Gb 是 (3.2.14) 
的 水 平 为 8{ 乓 ) 的 UMP 检验 ， 由 于 其 在 后 处 的 功效 8 000) <1, 
焦 定理 3.2.1Gi), 必 有 加,[3(X)] 8(0J)， 这 个 牙 盾 证 明了 : 
对 任何 满足 条 件 Ba[$ 8)] 一 a 的 检验 $3 不 可 能 有 EE。{$ (XX)] 
<8()， 这 证 明了 人 了 因而 完成 了 定理 的 证 胃 . 
本 定理 最 重要 的 一 个 情况 是 
系 3.2. 中 设 三 的 分 布 为 指数 族 
了 (人 Daum) ~ OO exp OT (dn), EO. 
《3 .2.15) 
和 为 自然 参数 空间 ，@c BR 而 8(9) 在 台 上 严格 单 己 . 则 对 扎 的 
任何 内 点 66, 有 
名 车 入 全 严格 上 升 ， 则 检验 问题 (3.2. 胃 的 水 平 a(0<a 
< 二 的 UMP 检验 由 (3.2.10)，(3.2.11}) 确 定 . 
(Gi) 若 旭 (9) 严格 下 降 , 则 (3.2.9) 的 水 平 a 的 UMP 检验 由 
有 形状 
1， 当 全 (w) <o, 
Pw 二 47， 当 T=0, {$8.2.10)’ 
0， 当 Ty 0, 
且 满 足 (3.2.11)，, 
证 明 由 定理 3.2.2 直接 得 出 , 只 需 注 意 ,在 名 (的 于 9EB 上 严 
将 增加 时 , 分 布 族 (3.2.15) 为 MLR 族 ( 对 统计 量 T(w)), 而 当 
@ 人 的 严格 下 降 时 (3.2 ,1 四 也 是 MLE 族 ( 对 统计 量 一 T (8)). 
对 假设 被 验 问题 
Hy gbo EOO Ky < EB, (3.2.16) 
得 到 与 定理 3.2.2 完全 类 似 的 结果 ; 
定理 3.2. 和 全 对 检验 问题 个 .2.16), 存在 水 平 a(0<a<1) 


* DHT» 


ee 
eo re ee i 


的 UMP 检验， 满足 (3.g.1) 且 具 有 形式 (3 .3.10)' 0 落 以 
8 由 记 由 中 的 检验 囊 的 功效 画 数 , 则 8 的 在 日 上 非 增 , 日 在 集 
{9.68€8, 0<B(0) < 二 1} 上 严格 下 降 . fi 车 8 汪 加 ,， 则 在 一 切 清 
是 条 件 (8.2.11) 的 检验 中 ,由 人 决定 的 中 的 功效 函数 有 (全 在 下 点 
达到 最 小 依 ， 
检验 问题 人 .23. 约 及 个 .3.16) 称 为 "* 单 边 假 设 ” 的 检验 问题 这 
基 UMP 和 检验 比较 系统 地 存在 的 唯一 情况 ， 具体 地 说 ， 这 些 情 说 
主要 和 包含 在 MLR 族 中 . 让 之 可 证 明 某 些 常 用 检验 为 UMP 检验 ， 
以 下 举凡 个 例子 . 
例 3.2.1T。 一 批 产品 一 共有 站 个 , 其 中 废品 有 三 个 , 下 为 来 
知 参数 ， 从 这 批 产 品 中 不 放 回 地 取出 m 个 ， 以 斑 记 其 中 废品 
数 ， 要 检验 假设 
H, M< Mo ER, M> Mo, 
此 处 6 为 0, 工 … 六 一 中 的 一 个 数 ， 
冬 服从 超 几 何 分 布 : 
pau (e) ~ Pu (=o) -jy j=0,1,. MM 
入 一 步 * 
(8.2.17) 
易 见 当 型 1 天 好 时 ， 


Pa 0) /pu 0) =ON, 1, Ms, MY 和 过 D+ 


d= 训 14+1 怎 一 贞 

因此 ,分 布 族 (3.2.17) 为 关于 统计 量 下 (o) =z 的 MDR 族 , 由 此 由 
定理 3.2.2 知 互 <> 丽 的 水 平 a(0<e<DTD 的 UMP 检验 为 

1, 当 v0 

sl 当 w=0, 

0, 当 2< 小 

6 和 YI0<sr<1 由 公式 
Bul$ (2)] = Spal) +rpuG-a 
确定 , 
情 3.9.2. 设 XX 于 ;， ry 和 , 为 iia 样本 ， 而 怪 1 前 分 布 为 
odds 


Pel =P = 当 w=1, 
Pm) =1—0, Gro0, 0<6<1, 
任 取 名, 0< 加 <l， 考虑 检验 问题 
EH. < 0 EKE.: > 0,, (3.2.18) 
{严格 地 应 写 为 0<6< 抽 <31>8 汪 6， 在 不 致 引起 含混 时 , 我 们 
不 换 泥 于 这 种 细节 .》 


我 们 有 I Ce) a 代 一 信 mn 一 由 


这 为 一 关于 Q(9) log 也 和 了 (zu …, mm) 一 六 的 指数 诸 ， 
由 于 QC0) 严格 上 升 ,由 系 3.2.2 知 (8.2.18) 的 水 平 a(0<a<1) 
的 UMP 检验 为 
1， 当 >, 
Pm 1 oe) -| T， 当 人 一 6, (3.2.19) 
D， 当 了 < 
了 服 拓 二 项 分 布 Bm, 0)， 故 和 了 (<rs 切 由 
PA LE RO" (3.2.20) 
确定 . 
在 这 里 有 一 个 细节 值得 提 到 一 下 , 对 本 俩 中 的 分 布 族 而 宫 , 自 
然 的 参数 空间 是 0<9<1， 为 了 使 应 polm) 有 指数 族 的 形式 ， 把 
9 一 0 和 9 一 1 两 点 去 控 了 ， 但 是 不 难 证 明 ， 即 使 取 参 数 空间 
为 0<8<1，(3.2.18) 的 水 平 w 的 UMP 检验 仍 由 (3.2.1g 和 
(3.2.20) 确定 ， 这 个 细节 的 证 明 留 给 读者 、 在 Foiseon 分 布 族 的 
参数 的 单 边 假设 检验 问题 中 也 出 现 关 似 的 情况 . 
例 3.2.3， 设 了 1 …， 玉 。 为 取 自 刀 (8, 习 的 ii 样本 ， 要 检 
验 假 设 
HH. 站 op,, 


我 们 有 Hs (wy 0) = (D8) 30-1"/2 exp 又 :> a .0 


5s 


dm hh 


此 为 关于 @(O) 一 0 了 Ce …。 sn) = 加 的 指数 族 。 由 此 得 到 水 
平 w(0<a<D 的 UMP 检验 为 
1， 当 TT>6, 
$n, ~ en) 7 当下 一 0 {3.2.21) 
0， 当 T<6., 
但 人 ~ (n0, 内 为 连续 分 布 ， 因 此 PoCT0) 0 对 任何 名 而 
(8.2.21) 可 以 用 
1， 当 了 0, 


LS ={o 当 To 
来 代替 , 0 由 关系 式 如 .LT>6] 一 a 确定 。 由 于 全 一 友人 8, 和 由， 由 
此 式 不 难 定 出 . 


(3.2.22) 


0—nBo+ vn Zo. (8.2.23) 
此 处 2。 满足 四 (Zo) 一 1 一 g, 而 再 (为 真人 0 1) 的 分 布 函数 . 
还 有 若 于 常见 情况 可 用 定理 3.2.2 解决 ， 我 们 留 绽 读者 作为 
练习 . 


(三 ) 用 Bayes 方法 求 UMP 检验 


设 我 们 想 要 求 检 验 问 题 (83,1,1) 的 UMP 检验 ， 一 般 息 步 具 

是 任 取 一 个 各 EBr,， 考 惠 检 验 问题 

五 : Ere Kl = (8.2.24) 
设法 找 出 这 个 问题 的 水 平 a 的 UMP 检验 . 若 这 检验 与 各 EB@x 无 
关 , 则 它 最 然 就 是 (3.1.1) 的 水 平 & 的 UMP 检验 ， 

于 十 问题 归结 为 找 (3.2.2 区 的 UMP 检验 ， 关 于 这 个 问题 是 
这 样 考虑 的 ， 问 题 在 于 “分 辨 ”Gs 中 的 98 值 与 如 ， 如 果 在 By 中 
有 某 个 %， 使 分 布 Po, 与 Pa“ 最 接近 ”, 则 由 直观 上 可 以 想象 ， 如 
能 将 名 与 由 加 以 区 别 , 则 也 就 能 将 Br 与 站 加 以 区 别 , 这 样 问题 
就 化 为 更 简单 的 ， 形 如 (3.2.12) 的 检验 间 题 ， 从 而 可 以 简 用 定理 
3.2.1， 我 们 在 证 明定 理 3.2.2 中 实际 上 就 用 了 这 个 想法 ， 此 处 
和 一 地 :8<8 而 所 > ， 昌 然 , 与 外 最 接近 的 就 是 包 . 

= 250 * 


TI) 


但 在 较 复杂 的 情况 下 ， 可 能 不 存在 一 沾 显然 的 加 EBsg, 与 由 
看 来 "最 接近 ”"， 而 是 有 一 些 这 样 的 加、 这 时 我 们 自然 地 想到 ， 将 
这 些 值 加 以 适当 的 混合 , 可 能 得 出 一 个 最 接近 于 Ps 的 分 布 , 因而 
有 助 于 达到 我 们 的 目的 ， 这 样 得 出 下 面 的 作法 ， 在 日 中 引进 o- 
碟 吻 o 以 入 记 其 上 的 一 个 概率 测度 ， 作 


入 四 -| fC, Oar0). (8.2.25) 


此 处 行 (w， 乓 GD) ，4EB} 为 耳 的 分 布 凤 ， 这 里 我 们 假定 
fw, 外 为 加 wx 58e 可 测 ((2， 2 由 为 三 的 样本 空间 )。 这 时 , 不 
难 知道 ( 见 $3.8 (五 ))， 由 人 8-3.2 辐 定 出 的 为 为 绍 - 可 测 且 


二 四 各 四 = 因此 ,had(o) 定 出 (2B) 上 的 一 个 概 


率 测 度 ， 我 们 提出 检验 问题 

豆 x: 于 的 分 布 为 及 (eo) dp (网 妈 刁 1: 三 的 分 布 为 Ps,， 

人 (3.2.26) 

而 希 鹿 适当 地 选择 X， 使 他 .3.26) 的 水 平 x 的 UMD 检验 ， 也 是 
(3.2.24) 的 水 平 a 的 UMP 检验 . 在 这 里 , X 起 着 先 验 分 布 的 作用 
(但 这 个 先 验 分 布 全 集中 在 G6r 上 )， 因 而 可 称 为 Bayes 方法 . 

这 个 方法 的 基础 是 下 面 的 简单 定理 . 

定理 8.2.3. 以 办 记 (3.2.26) 的 水 平 a(0<a<l) 的 UMP 
检验 ,着 轴 对 (3.2.24) 也 是 水 平 a 检 验 ， 则 它 是 (3.3.24) 的 水 
平 a 的 UMP 检验， 上 且 车 办 是 (3.2.26) 的 唯一 的 水 平 a 的 UMEP 
检验 , 则 它 也 是 《3.2.24) 的 唯一 的 水 平 a 的 UMP 检验 ， 

证 . 设 台 为 曲 .2.2 多 的 一 个 水 平 4 迷 验 , 以 8209) 记 其 功效 西 
数 , 则 


Gan -| 四 加 人 say Dap 


-| ea) <a 


这 说 明史 也 是 《3.2.26) 的 一 个 水 平 a 检 验 ， 由 于 办 为 (8.2.26) 
的 水 平 a 的 UMP 检验 ， 有 B60) 所 Bi.(0) (8,00) 为 加 的 功 雍 丁 


.5 s 


数 ), 故 办 为 也 .3.24) 的 水 平 a 的 UMP 检验。 定理 后 一 部 分 的 
证 明 是 明显 的 ， 只 需 注意 ，(3.2.24) 的 任何 水 平 a 检 验 必 为 
人 .3.36) 的 水 平 检验 ， 定 理 证 毕 ， 
二 例 是 本 定理 的 一 个 有 趣 的 应 用 . 
例 3.2.4. 设 下 ，， 互 为 取 自 去 (人 co 的 iid 样本 , # 和 
友 都 未 知 ， 考 虑 假设 检验 问题 
再 ;1， 一 co 所 站 必 oo， 可 吃 G0<3 EI: 一 o0<G 民 oo Coo, 
(3.2,27) 
已 及 
Hy: —oCao0, GPO Ks — LH, OO, 
(8,2.28) 
这 两 个 问题 的 最 常用 的 检验 是 对 五 : <3 六 ,和 理 定 域 为 U 
一 遍 (ZX 一 时 )*>o ( 当 水 平定 为 4 时， 到 c=-o8 吕 1 加)， 对 
五 ;下 ;否定 域 为 Ue ke 之 值 同 前 )， 现在 我 们 想 弄 清楚 ， 这 
些 检 验 是 否 为 UMP 检验 . 
记 王 ~ 有 至, 则 伍 , 四 为 充分 统计 是。 根据 充分 性 原 列 ， 可 以 
只 考 虚 基于 (Y， 0) 的 检验 ，《Y， 中) 的 密度 为 
0, < 人. 
这 里 Co) 为 一 只 与 % 和 a 有关 的 常数 . 
先 讨论 检验 问题 (3.2.27)， 任 取 一 点 (st，oa)，oa>ao 考虑 检验 
问题 
He KE! gs, ga. (3.2.29) 
显然 , 从 分 布 接近 的 观点 看 ， 先 验 分布 和 应 全 部 集中 在 直线 e 一 oo 
上 .、， 因 此 这 个 先 验 分 布丁 视 为 5 的 一 个 概率 分 布 ， 由 上 述 
gao ( 妨 划 的 形式 , 得 
hg, WO Ve [ep [~ 0 J). 
(3.2.80) 
[7 


i 


而 在 4=m, 9 一 i 时 全 ,ID 的 密度 为 Von 人: 雹 ， 先 验 分 布 的 选 
择 只 影响 到 了 的 分 布 ， 不 难看 到 ， 若 取 和 为 正 态 分 布 an 


二 (of 一 c8) 则 在 加 中 工 的 分 布 与 在 gu 中 工 的 分 布 一 样 (这 个 
简单 计算 留 给 读者 ). 这 样 , 五 <> 下 1 的 水 平 a 的 UMP 检验 的 否 
定 城 为 : 

Pt 
即 {wc}， 若 取 6 一 o8x4-1 (la)， 则 所 得 检验 在 (8.2.29) 之 下 显然 
也 是 水 平 a 的, 因此 恢 定 理 3.2.8, 以 


{eo): oD 0} 


为 否定 域 的 检验 , 为 (3.2.29) 的 水 平 的 MP 检验 . 出 了 于 这 个 检 
验 与 ,os 无 关 , 它 就 是 检验 问题 个 .2.27) 的 水 平 “ 的 UMP 检 
验 . 

对 检验 问题 (3.2.28), 情况 有 些 不 同 . 设 在 问题 玉 。<3 1 中 ， 
ci<ao， 这 时 , 了 的 方差 的 任何 增加 都 会 使 五 , 更 远离 玉 !、 这 意 
味 着 ， 应 在 (83.2.30) 中 取 * 集 中 于 #= 抽 一 点 ， 这 时 为 协 
一 Von 人 多， 而 五 :< 五 1 的 水 平 & 的 UMP 检验 有 否定 城 


区 和 2 
exp | 一 您 一 号 | sy 
ep 一 一 
注意 到 w+m@ 一 a0) 一遍 (ci 一 0)% 此 否定 域 为 
{0 于 (3.2.31) 


此 处 取 e=ag 巡 (1 - wx), 以 使 检验 有 水 平 a“ ， 

柳 证 明 以 人 3.2.33) 为 理 定 城 的 检验 对 问题 Hi*Y 天 4 a 一 a 
= ol 也 是 水 平 g 的 UME 检验， 根据 定理 3.2.838， 只 需 证 明 其 功 
歼 函 数 Bt 中 在 o>oo 上 于 点 《mg) 处 达到 最 大 值 , 我 们 先 证 
明 ， 对 固定 的 ooo, Bt 中 在 4=d 处 达到 最 大 值 ， 事实 上 ， 


TT 


Pas (Daa)? ee ) -Po me)’ ) (3.2.32) 
在 0 时 ,有 
三 之 Co 0) (G0)™. 
根 癌 必 芬 布 的 性 质 了 ( 见 $1.1，( 二 )), 概率 (3.2， 32) 在 六 
让 


的 下 降 立 数 ， 因 此 在 eco 的 范围 内 ， 此 概率 在 o=o6 处 达到 最 
大 ， 这 证 明了 ; {38.3.82) 在 o>0o 上 确实 在 4 一 au G 一 oo 处 达到 
最 大 ， 由 此 可 知 ， 以 (3.2.81) 为 否定 域 的 检验 是 互 *s> 五 : 的 水 
平 a 的 UMP 检验 , 且 是 其 唯一 的 水 平 a 的 UMP 检验 ,因为 依 定 
理 3.2.14ii， 它 是 五: 们 玫 1 的 唯一 水 平 < 的 UMP 检验 ， 而 依 
定理 3.2.8, 这 保证 了 它 也 是 五 ;** 五 1 的 唯一 的 水 平 a 的 UMP 
检验 .因为 这 检验 与 芭 中 特定 的 点 (yx, oa 有 关 ， 知 检验 问题 
五 < 天 3 的 水 平 4 的 UMP 检验 不 存在 . 

本 例 的 结果 是 Lohmann 和 Siein 在 1948 年 得 出 的 ， 对 于 
帮 避 oz 中 检验 gw 或 4 之 qo 的 间 题 , 他 们 证 明了 : 常用 的 一 樟 


本 刀 检 验 在 水 平 之 计时 为 UMP 的 , 而 在 a< 去 时 则 否 , 然而 ， 
以 后 我 们 将 证 明 这 些 检验 在 更 限制 性 的 意义 下 有 最 优 性 质 。 


§ 3.3. 一 致 最 优 的 无 偏 检验 

《一 ) 定义 和 预备 知识 

沿用 3.1( 一 ) 中 的 记号 ， 考虑 袜 验 问 题 (3.1.D。 在 上 节 中 
我 们 指出 过 ， 一 般 , UMP 检验 不 存在 ， 这 是 因为 对 立 假设 Bx 一 
般 比 较 复 杂 , 对 Bx 中 任 一 点 各 问题 EBF 9 一 看 的 UMP 检 
验 ， 往 往 与 不 有 关 ， 按 照 $1.4 以 及 第 二 章 中 处 理 佑 计 问 题 的 作 
法 , 我 们 可 以 降低 对 于 最 优 性 的 要 求 , 比如 说 , 将 所 考虑 的 检验 的 
范围 缩小 , 然后 设法 在 这 个 缩小 了 的 范围 肉 , 找 出 一 个 一 致 最 优 的 
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检验 .检验 的 无 偏 性 就 是 这 样 一 种 要 求 . 

定义 8.3.1. 设 弛 为 (8.1 的 一 个 检验 ， 其 功效 函数 用 

BB(D 记 .车 

BD 和), 对 任何 抽 EBFy 及 EB, (3.3.1) 
草 称 办 为 问题 (8.3.1.) 的 一 个 无 偏 检验 ,车 吵 为 信 .1. 几 的 一 个 无 
偏 答 验 , 水 平 为 <。 落 对 (83.1. 了) 的 任何 水 平 a 的 无 偏 检 验 $ (其 
功效 酒 数 记 为 B87 (6)) 有 

让 之 By (0), 对 任何 09E9z, (8.8.2) 

则 称 少 为 他. 的 一 个 水 平 e 前 一 臻 最 优 无 偏 检验 (Uniformly 
Most Powerful Unbiased Test， 简 记 为 UMPU 检验 }. 

人 .3. 世 的 意义 是 很 明显 的 .在 提出 一 个 检验 时 , 我 们 希望 其 
功效 函数 局 在 因 上 您 小 请 好 ， 而 在 Br 上 则 僵 大 人 意 好 . 落 
(8.3., 了 不 浪 足 , 则 存在 而 E65 及 0,E6r, 致 B09) >>By(62) .这 
时 ， 当 一色 即 零 假设 五 不 成 立时 ,五 被 否定 的 机 会 反而 不 如 
8 一 由 也 即 豆 成 立时 ,五 被 否定 的 机 会 那么 大 .这 种 检验 从 整体 
上 和 看 是 不 可 取 的 , 然而 , 为 了 腿 顾 在 Br 的 某 个 范围 内 的 一 致 最 优 
性 , 就 可 能 得 出 这 种 检验 ， 夏 下 面 的 简单 例子 . 

例 3.8.1、 设 了 -…， 也 ,为 自 入 (@, 办 中 拍 出 的 i 记 样本 ， 
考虑 假设 检验 问题 


b=0*>0F0. (3.3.8) 
性 取 鲍 >0， 由 定理 3.2.1 不 难得 出 ; 问题 
站 于 站 < 一 由 
的 水 平 < 的 UMP 检验 由 有 否定 域 
(oa oo) La/ Vn } (8.3.4) 


(go 的 意义 见 例 3.23.8)， 检验 由 与 下 >0 无 关 ， 因 此 它 作为 零 假设 

8 一 0 的 一 个 (水 平 呈 检验， 在 对 立 假设 4*0 的 一 部 分 {0; 9 人 0 

上 , 有 一 致 最 优 性 , 然而 , 计算 其 功效 函数 B,, 得 
SAGE Dec 

冰 为 入 QO, 汪 的 分 布 函数 . 当 53 一 o0 时 ， Bs(6)->0, 而 且 一 般 地 

有 (外 之 By(0) a 当 9<0. 因此 , 当 5<0 (这 时 8 一 0 不 成立 ) 
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讨 , 用 检验 办 就 很 蕉 检验 出 来 , 所 以 , 检验 和 没有 无 偏 性 , 曙 则 它 在 
局 部 上 ( 即 86>0 时 ) 有 良好 性 质 , 但 从 整体 上 来 看 是 不 可 取 的 . 元 
偏 性 前 要 求 把 这 种 检验 排除 在 外 ， 读 者 不 难 验证 ， 若 取 另 一 个 水 
平 a 的 检验 上 由， 其 否定 域 为 

{mi es Wn) 2 一 /nj 
由 岂 有 和 目 同 样 的 问题 . 

现在 考察 检验 必 ， 其 否定 域 为 

{oa 7 we): [2 | sf/ VY, 
我 们 留 给 读者 验证 ，1”, 六 的 水 平 为 m 2°, "为 (3.3. 昌 的 无 偏 
检验 ， 但 是 和，p (四 一 B( 四 , 当 0>0 而 Bat 四 <Bw(0) 当 
<0. 因此, 多 在 整体 上 有 欧 好 的 性 质 〈 无 篇 性 ), 但 是 由 于 照顾 
到 这 一 点 , 它 在 局 部 上 (例如 , 8>>0 或 8<0 上 ) 没 有 达到 可 能 最 好 
的 结果 ,以 后 我 们 将 证 明 ， 在 无 忆 性 的 前 提 下 , 检验 必 已 达到 可 
能 最 好 的 结果 , 即 ， 几 为 (38.3. 妈 的 水 平 a 的 UMPD 检验 . 

以 下 几 点 简单 事实 直接 从 元 偏 粒 验 的 定义 中 推出 ， 我 们 让 讯 
者 自己 去 验证 ; 

I. 车 办 为 (3.1. 了 D 的 无 偏 答 验 , 其 真实 水 平 为 a 则 B, 00) >a 
对 一 切 8EGx. 

3, DMP 检验 必 为 无 恨 检 验 , 因而 是 UMPU 检验 . 

3. 设 台 为 欧 筷 的 ， 以 @ 记 Br 和 Bg 的 公共 边界 ?， 而 加 为 
(3.1. 力 的 一 个 真实 水 平 为 a 的 无 偏 检 验 , 其 功效 了 画 数 By( 外 为 8 
的 连续 函数 , 则 

(60) =a, 对 性 何 9 了 Ew (3.8.5) 
相似 性 及 Neyman 结构 ， 

从 廿 面 的 3 帮 到 ,满足 条 件 人 .3 .号 的 丛 验 ,在 无 偏 检 验 理 论 
中 有 一 定 前 重要 性 ， 因 此 , 引进 如 二 的 定义 。 

定义 3.8.2. 车 加 为 人 8.1. 少 之 一 答 验 ， 其 功效 函数 Bs,(0) 之 
值 在 中 上 保持 不 变 , 名 为 昌之 一 子 集 , 则 称 检 验 几 对 于 集 上 相似 ， 

雪 严格 定义 如 下 : 8Ew 当 且 仅 当 ,对 任何 p>0， 以 为 申 心 , p 为 半径 之 球 ,与 
5 和 Dr 都 有 非 空 交 。 
4 958 ， 


或 者 说 , 由 关于 分 布 族 {Po 8Eej 相似 ， 

用 这 个 术语 , 前面 的 性 质 3 可 表述 为 ， 车 BC6 ) 为 8 的 连续 
函数 ， 则 中 对 于 Bx 和 Br 的 公共 边界 w 相似 与 相似 性 密切 想 
关 , 有 如 下 的 概念 . 

定义 3.83.8. 设 1z) 为 关于 分 布 族 (Ps,8Ew) 的 一 个 充分 
统计 熙 (这 意味 着 国定 4 时 ， 对 一 切 8Ew, 可 选 出 一 个 公共 的 
了 ol41 介 ,因而 ， 给 定 检验 起 对 一 切 8Ew 可 选 出 一 个 公共 的 
玉 o (中 (这 ) 全， 这 记 为 也 ($$ (本 ) | 月 )。 如 果 存 在 a, 0<a<1, 致 

[bt() | 一 a (4. 9. Po), 对 任何 BEw,， (8.8.0) 
出 称 检 验 中 对 于 已 只 有 Neyman 结构 . 

显然 , 若 由 对 追 0) 有 Neyman 结构 , 则 玫 对 名 相似 ， 此 因 

BelD) =— Bett 3) — EtBCG(T) | ~ NE 人 何 dEw, 
其 道 不 真 。 但 是 ,有 如 下 的 定理 ， 

定理 .8.1. 设 t(w) 为 关于 分 布 族 (Ps, bgE 由 的 一 个 充分 且 
有 界 完全 ( 见 §$14.6 (四 )) 统计 量 ， 则 任 一 检验 加 对 人 针 吕 有 
Neyman 结构 的 充 要 条 件 为 它 对 四 相似 ， 

证 . 必要 性 已 证 ， 瑰 证 充分 性 , 记 

VOD- ES ID —a. (38.3.7) 
此 处 鹉 号 ( 王 ) | 机 理解 为 在 分 布 族 (Ps， 6Eaw) 中 取 ， 由 于 上 为 此 
族 的 充分 统计 量 , 吾 [ 直 (下 ) | 杂 可 选 联 使 之 与 58Ew 无关， 我们 假 
定 玫 对 必得 似 , 则 

Bott = EtEG LE) | 月] 一 xc 一 ax 一 ae 一 0 Em. (3.8.8) 
但 由 条 件 期 望 的 性 质 s 及 0 所 $$ (9) 所 1 知 昌 (和 有 界 , 故 由 个 .3.8 
及 二 的 有 界 完 全 性 , 知 

目 人 一 0 (ae 了 Po， 对 尾 何 En (3.8.9) 
再 由 (3.8. 门 师 | 
EFF) De .0 Pn), 对 任何 8E@， 
因而 上 对 于 GG) 有 Neyman 结构 ， 定 理 证 毕 . 

这 个 定 更 的 作用 如 下 ， 由 (3.3. 失 ,存在 集合 BE 纺 , 致 

Pei() EB) =~0, 对 任何 0Ea 使 当主 不 属于 这 例外 集 互 时 ， 
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EE 


有 
EI$(A)I =a, 对 一 切 和 Eu 

这 就 是 说 ， 条 件 功效 函数 再 [ 丰 ( 互 ) | 要 (以 后 将 看 到 ， 它 可 理解 为 
在 + 给 定时 条 件 检验 的 功效 函数 ) 也 和 无 条 件 功效 函数 6 一样 ， 
对 有 相似 性 ， 以 后 将 看 到 这 个 事实 的 应 用 . 

Neyman-Pearson 基本 引 理 的 推广 : 

§ 3.2 的 定理 3.2.1 可 作 如 下 的 推广 . 

定理 3.3.2. 放 心志 Bx, ) 为 一 个 测度 空间 . fi{w), Ye， 
…， 名 十 二 都 是 定义 在 色 二 的 六 可 积 画 数 ， 又 oa，…， en 为 给 定 
的 实 常 数 ， 以 多 记 一 切 满足 条 件 


[SOF Apo sl om 


的 检验 函数 力 的 集合 (检验 函数 掺 满足 0 的 ) 所 1 的 达 可 测 
函数 ), 假定 多 非 空 。 如 果 存 在 $E 多 司 对 某 些 常 数 厂 ，…，, 
有 
著 foni()> 名 f(t) 
由 (四 = 本 《3.3.10) 
0, 车 fmti(®?) < hfe), 
则 
人 PD) frri lt A = sup | pm fa ds, (3.3.11) 
又 车 人 汉 E， 且 存在 常数 吾 ，…, 后 ， 致 


1 车 fmrz(2) 之 所 (0)， 
$0 -| 六 


” (8.8.12) 
0 车 fani( 罗 > 总 和， 


[Bra ding | $C)fnrs (od. (3.3.18) 
证 . 定理 的 证 明 妆 定理 3.2.1 的 (区 的 证 明 完全 相似， 以 各 
记 任 何 属于 多 的 检验 函 教 , 记 
B+~ {0: 2E 2, $0) > 
SH» {x: EA $m) < (r)}, 
品 后 品种 


则 与 定理 3.2.1 的 (ii) 的 焉 明 中 的 推理 一 榜 , 有 
[$0) -WEfnn(o) — Dh) >0, 2s€ S'US-. 


因此 [660 一] [fm (9) 一 六 机 Id 


= Op Ian Bf) ldp>0, 
从 而 虫 肌 GE 多 和 EE 风 可 向 
| 8 00 -$0) If eo) dy 
>| $0 -$ID hf a 
= 襄 to 一 启 k=, 


所 以 [$faa( dy>| g*ofnrz (oydp. 这 证 明了 (3.3.1D)， 
(3.3.18) 可 类 似 证 明 . 

注 . 可 以 证 明 以 下 两 点 : 

1， 必 存在 外 E 多 致 (3.3.1D) 威 立 (类 似 地 对 (8.3.13)); 

2 若 点 Woz，…，om) 为 集合 


4 长 | 4 1 «oe | ra se) 


的 内 点 , 则 存在 常数 丙 ，…， ks 及 埠 EF, 致 B8.3.10) 和 (8.3.11) 
域 立 . 且 对 任何 满足 (.3.1) 的 名 EF, 必 满 足 (3.3.10) 4.e. 巾 。 
类 似 地 对 (3.8.12D) 和 (3.3.1B). 这 相当 于 定理 3.2.1 的 人 和 {tiii) 
{定理 3.2.1 相当 于 本 定理 m1 的 销 况 )。 这 两 个 事实 的 证 明 率 
涉 到 某 些 复杂 的 细节 ， 因 而 在 此 从 上 略 . 有 兴趣 的 读者 可 参看 [1 
(p. 83 和 P. 354) . 


{二 ) 单 参数 指数 族 的 UMPT 检验 


设 变 量 芋 约 祥 本 空间 为 (他 ， 红 4) 分布 族 为 指数 族 
{aPo ls) =~0 (0) orndple) =f w, Oanle), EQ}, (3.3.14) 
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电 为 自然 参数 空间 .在 8 3.2 中 我 们 已 经 知道 ， 对 这 种 分 布 族 , 检 
验 问 题 8sbs> > 如 及 8 名 sg 加 都 有 UMP 襟 验 ( 此 处 政 
及 下 为 简便 计 ， 就 以 各 之 2 记 但 E96, 000 等 等 )， 另 外 两 个 
重要 的 检验 问题 大 
Hi 凡生 8 二 gs> Ry < (3.3.15) 
以 及 
Hy = Ks, OF (‘3.8.16) 
这 两 个 检验 问题 都 没有 UMP 检验 , 道理 与 例 3.3.1 相似 (我 们 把 
这 一 点 的 严 烙 证 明 留 给 读者 }.， 现在 我 们 去 证 明 ， 它 们 的 UMPU 
检验 都 存在 且 就 是 我 们 在 初等 统计 中 习 见 的 那 种 检验 . 
先 讨论 地 .3.15) (自然 , 设 册 < 的 、 取 au 0 一 a<l。 
定理 3.3.3. 车 检 验 少 满足 条 件 
Eolp A) = Bs thtI)] =a, (38.8.17) 
且 有 形式 
1 若 #(0 之 1 或 42) 04 
四 一 7 车 #2) 一 扣 $ 二 1,2, {3.3.18) 
D， 若 四 < 下 2 <0 
这 里 0 二 Ya 二 号 1， 则 古 为 (3.3 .1 加 的 水 平 a 的 UMPU 检验 ， 

证 ， 由 于 分 布 族 为 指数 族 , 依 定理 1.2.1, 任意 检验 名 的 功效 
函数 Bs (四 为 8 的 连续 函数 , 因此 , (3.3.1 的 任何 水 平 a 的 无 偏 
检验 必 满 足 (3.8.17， 现 设 名 满足 (3.3. 雪 ) 和 (8.8.18)， 我 们 证 
明 ， 对 任 给 由 Ee [而 , 6,] 存在 常数 ,kh (与 有关 ), 致 

$8) = | 1, 当 OO Ne EO emt EO C0) et, 

0, 当 O(N er huO CO ent baO (3) et 
如 果 这 一 点 证 明了 , 则 我 们 由 定理 3.3.2 推出 ， 满 足 (3.3.17) 和 
《3.3.18) 的 中 在 一 切 满足 条 性 (3.8.17) 的 检验 庙 数 中 ， 使 B06") 
达到 最 大 ， 由 于 (8.3.18) 与 钱 无 关 ， 所以， 村 是 能 证 明和 省 的 水 平 
是 a ( 即 局 (多 二 对 一 切 8E [9 865]), 刚 册 为 从 .3.15) 的 水 平 a 
的 UMPU 检验 . 
考虑 方程 组 (以 眉 ， 态 为 未 知 教 ) 


(3.8.19) 


O (Ferm = hOB ema kaO (On) er, 
ON em hd (OD) ent kod (Og) ee, 

这 方程 组 的 行列 式 为 
CON) OH) exp (O01 + 03) 一 ezpfBsc + O16) 1 , 

它 大 于 0 因 0()>0 对 一 切 8E6, 又 

oF Baes— (ata ton) = (0 — 0) (een) >0 (8.8.21) 

(因为 负 之 二, <co)， 故 方程 组 (8,3.20) 有 解 . 为 确定 计 设 

全 汪 >， 则 (用 导致 (3.3.21) 同样 的 推理 可 得 解 hu， ks 满足 坊 天 0， 

和 >>0，、 拒 五 改 写 为 一 三 知 关 系 式 

ON th O OI et = ko0 (Os) eht (3.8.22) 

在 t= 及 #=6s 处 成 立 ,此 处 太守 0, 和 >0， 也 就 是 说 ， 关系 式 

O(N eitO eb) (3.3.29) 
在 t=61 及 t=o 处 或 立 ”， 由 于 地 .3.23) 左边 为 二 的 严 凸 函数 而 
右边 为 常数 , 故 当 oa<ti<os 时 ,有 

人 (Ge 十 DO kaO(0,), 

而 当 #<ea 或 409 时, 反 过 来 的 不 等 式 成 立 ， 同色 (3.8.22), 得 
O(N thO (ON em koO (ON ert, ty, 
OO EO ON em CD (0) es to fo9. 

从 而 证 明了 由 届 .3.1 纺 规定 的 和 及 .3.19) 的 形式 . 

现在 证 明 9 《的 对 站 为 此 提出 极 什 问题: 在 一 

切 满足 条 件 忆 .3.1 六 的 检验 函数 中 中 , 找 一 个 使 记 地) 达到 最 小 ， 

此 处 六 取 定 于 ( 册 ， 的 ) . 这 个 最 小 值 显然 不 超过 wm 因为 加 四 三 

满足 但.3.17.。 我 们 和 证明 ， 若 由 满足 43.3.1 四 及 公 .,3.18)， 则 它 

就 是 上 述 极 值 问题 的 解 ， 证明 方法 与 上 述 完全 相似 : 先 建立 方程 

组 (3.3.20), 这 时 其 解 有 得 >0, 和 >、0， 于 是 与 上 面 完 全 相似 , 得 

出 


(3.3.20) 


bo CO) em kyO (Oo) er OO er Y orct<o, 
hiO (OO) et 0 (0 tO et 当 to 蕊 权力 
这 祥 得 出 


.Hi 


$0) = [ 0， 当 OO et EO OO) ent +t koG (Oa ef 
1, OO ecEO 0 tt kb Oa eet, 
因而 由 定理 3.3.2 后 一 部 分 知 , 由 (3.3.17), (3.8.1 纹 次 定 的 中 的 
确 在 一 切 满足 (3.3.17) 的 $8 中 ,使 PCD) 达到 最 小 , 芳 而 
Bs (90) PF) = a. 
这 证 明了 中 的 水 平 确 为 mw 从 而 证 明了 本 定理 ， 
现在 讨论 检验 问题 3.3.16) ， 关 于 它 有 如 下 的 
定理 3.3.4. 若 检 验 $ 满 足 条 件 
Bo LB EY = (8.8.24) 
Elt(X)$ (I) —oB, Lt)], ‘3.3.26) 
且 上 有 (3.3.18) 的 形式 ,出 中 为 (3.3.16) 的 水 平 < 的 UMPTU 检 
验 ， 
证 .首先 指出 ， 藻 邓 为 多 ,3.16) 的 任 一 水 平 为 ce 的 无 偏 检 
验 , 则 它 必 满足 3.8.24 和 向 .3.2 且 ，。 由 定理 4.2.1 知 , 中 的 功效 
页 数 局 (四 在 日 上 对 8 连续 可 导 , 因 此 由 无 偏 性 立即 得 出 (3.3.24) 
及 局 o) 一 0, 但 
Cr 


BC0) = Balt(X) bX)] + EolbX)], 


再 由 1.2,0"( 久 /OD) = 一 忆 :(E( 半 ,以 此 代入 上 式 , 并 置 8 一 的 ， 
得 


Balt (CX)PIT)] — Bo th (TX) Bolt)] =—o Bs [itX)], 
好 (3.3.25). 
现在 任 取 站 天 如 而 证 明 ; 若 四 满足 但.3.24) 和 (3.3.25), 县 有 
(3.3.18) 的 形式 ， 则 它 在 一 切 满 足 (3.3.24 和 8.3.25) 的 检验 阔 
数 瑟 中 ,使 B89) 达到 最 大 显然 ,这 就 证 明了 所 要 的 定理 ,要 证 
明 上 述 事实 , 根据 定理 8.3 .2 前 一 部 分 ， 只 项 证 明 :， 存在 常数 如， 
(与 有关), 致 
Py { 1, 洪 O 人 EO (60 ewt+ EO (00) ertf, 
0， 若 Oc<kO (Oo0) et ky (Ho) ee 人 
其 证 明 与 上 定理 相当 的 部 分 一 样 ， 先 建立 方程 组 


2 


OON em = EO (Boer + EO (Oo) eone,, 

OB eh 0 et ka Co) ero. 
由 于 ox<cs, 此 方程 组 的 行列 式 大 于 0, 因而 必 有 解 且 ,， 加， 因此 ， 
关系 式 


OF) er = CO (G0) [hs + bd (3.3.26) 
在 = 和 #=0s 成 立 。 此 式 等 价 于 
et 二 +a (60). (3.3.27) 


由 于 驻 为 所 的 严 凸 函数 ，( 人 .3.27) 在 t=ot 和 1 二 os 成 立 导致 
十 当 #< 之 0 或 0 因此 有 

{ 20) et emi (O00) Cbst bd WM oto 

OON e000) (hit had， Gt 及 > 

即 4 = 人 O00 (Oo0) ent hs Kal), 
0 O00 0 (Oo) est (hr + Ed). 
根据 定理 3.3.2 前 一 部 分 , 知 吊 人 oO) 它 满 足 GG.3.18)、(3.3.24) 和 
(3.3.25)) 在 一 切 满 足 (3.3.24) 和 (3.3.265) 的 检验 函数 中 中 ,使 
B49") 达到 最 大 。 这 就 证 明了 省 是 (3.3.16) 的 水 平 的 UMPU 
检验 ， 定 理 证 毕 . 

注 - 可 以 证 明 :， 满足 这 两 个 定理 中 的 条 忻 ( 即 .3.17) 和 
(3.8.18), 以 及 (3.3.24), (3.3.25) 和 (3.18)) 的 检验 四 确实 存在 . 
这 项 要 利用 定理 3.3.3 的 注 中 所 指出 的 事实 , 然而 , 在 一 些 具体 例 
子 中 ,这样 的 的 存在 性 可 直接 验证 . 

例 3.3.2 ( 负 二 项 分 布 )， 一 事件 成 功 的 概率 为 8 0<8<1， 
取向, 0< 加 <1。 将 试验 独立 地 重复 下 去 ， 直 到 该 事件 第 次 出 
现 为 止 ,以 定 记 到 这 时 为 止 总 的 试验 次 数 .。 利 用 样本 及 来 检验 

= Fd 
为 此 , 记 于 = 这 ~ 忆 则 工 的 分 布 为 


P(X —n) -( ) PD)" 


-eerprlogl—0 R=0, I, 2, «°°, 


二 车 


因而 有 指数 族 的 形式 ， 利 用 定理 3.3.4, 知 水 平 & 的 UMEFU 检 
验 史 决定 如 下 : 找 6， Cy Ts a 其 中 1， 致 
D3 (YY ) a-00 

Ci 


Ne1+1 


+ 立 Ce 1 扯 忆 一 的 ) 于 位 一 外 一 二 一 


I=1 


G8(1— 0)" 


= > 


十 让 一 “7 


+ 它 。 (ae org- 
二 二 六 


-0 Dn ( "7 ) WL 0)* 
~ (一 四 下 代 一 8 0. (3.3.29) 
[3.3.28) 的 第 一 等 式 是 由 将 (3.3.2 辣 改 为 
Bo Ui) 过 一 由 (是 )7] 一 过 一 四 盏 o[E 大)] 
而 得 (注意 蕉 卫 ) 一 开 )，(3.3.23) 后 -一 等 式 的 证 明 留 给 读者 ,] 
照 以 上 两 等 式 定 出 64,65, fa 9 后 ,由 (3.23.19) 决 定 矶 身 即 
为 水 平 & 的 UMPU 检验 . 
例 3.3.3. 设 了 1 …, 于, 汶 取 自 康 (9, a 有 0 的 iid 样本 , o3 已 
知 。 要 检验 
O00 0F00 (3.3.29) 
写 出 (下 1,…, 下 ) 的 密度 ， 知 其 为 关于 tm …， 站 ) 一 局 wx 的 


指数 族 ， 再 考虑 到 分 布 的 连续 性 ， 由 定理 3.3.4 知 ，(3.,8.29) 的 


UMPTU 检验 帮 为 
4 当 思 Xi<a 及 寥 工 oo 
$F) = ， (3.3.30) 
0， 当 w< 富 三 ,<ox. 


cu 09 襄 选 择 之 使 满足 个 ,3.2 和 下 地 .3.25), 是 
s 


Ps, |a< 袜 让 ,之 59 } 


6 (ee 人) 一 $ (F200 一 i-a, (8.8.31) 


以 及 


Gd 一 ngo?] dt= (1—a)ngo, 
(8.3.82) 


rE 1 
+ bx 
“ warriag ?| 一 


(38.3.82) 可 化 为 


《cz ~ sn} /dn oo 1 ea 一 《TI 一 8 3.38.33 
人 tt) a uy 《 加 ) 纺 Oy ‘ ) 


适合 避 .3.38) 的 一 组 ,505 是 

二 no —¥ na0zsn, C= Ht op (3.8.34) 
和 的 意义 以 前 拱 出 过 密 次 ， 它 是 由 而 (zo.) 一 1 一 a 类 定 的 ， 不 难 验 
证 , 由 (3.3.84) 确定 的 cs 也 适合 (3,3. 红 )， 因 此 这 一 组 61, cx 
庙 是 要 求 。 代 入 人 名 .8.80), 得 到 ，(3.3.29) 的 水 平 & 的 UMPU 检 
验 为 ， 当 


no 0a 区 odor 


时 接受 零 假设 8--6, 否则 不 接受 。 例 3.3.1 是 本 例 的 特 甸 情 形 ， 

如 果 检 验 阿 题 是 

或 0>0,, {3.3.85) 
则 其 水 平 a 的 UMPU 检验 仍 有 必 .3.30) 的 形状 , 但 a, 6; 要 选择 
之 使 满足 (3.3.17), 即 
co— nO 01 一 物 昌 Ca 一 色色 01 一 各 各 
DEF) 本 (下 ) ~ (ee)~ 6 (Sa) 
1—a, 

这 时 or, 602 之 天 定 需 用 正 态 分 布 表 ， 通 过 逐步 试探 调整 的 方法 得 
出 ， 在 和 由 = 一 6a 的 特例 , 攻 有 oa = 一 6， 这 时 oa oa 不 难 几 正 态 分 
布 表 查 出 ， 这 个 特例 下 ,v3 的 具体 公式 的 推导 留 给 读者 . 

在 本 出 中 ,车 下/~ 入 8, go) 而 8, 于 都 未 知 , 则 (8.3.2) 与 
483.3.85) 的 UMPU 检验 仍 存在 , 但 不 能 用 这 里 的 方法 得 出 .这 站 
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一 个 多 参数 指数 族 的 问题 ， 下 面 我 们 就 将 讨论 这 个 问题 ， 


(三 ) 多 参数 指数 族 的 UMPU 检验 


正 森 分 布 族 {8 (& 0 中， 一 ce<e<co 0<os<eoj 为 一 个 包 
.会 两 参数 的 指数 族 。 常见 的 一 些 重要 的 检验 问题 , 则 只 涉及 这 两 
个 参数 中 的 一 个 .在 本 段 中 , 我 们 处 理 这 种 多 参数 捅 数 族 , 伍 只 这 
涉 到 其 中 一 个 参数 移 假设 的 检验 向 题 。 一 般 地 ， 当 一 个 分 布 族 依 
赖 多 个 参数 , 而 要 处 理 的 统计 问题 只 与 一 个 参数 有 关 , 则 其 余 那 些 
参数 往往 称 为 多 余人 参数 (Nuisance Parameter), 象 在 上 述 正 态 分 布 
族 中 ,车 问题 是 检验 假设 s<0， 则 e 为 一 个 多余 参数 ， 
因此 ,假定 变量 于 的 分 布 族 为 
dPo,r (0) ~ 0 (0, PoxpCOU (0) + Tl)) dle), #, #) ED, 
(3.8.86) 
这 至上 六 为 样本 空间 (他 ， 肌 四 上 之 一 o- 有 限 测度 ， 又 g 一 《qn …， 
Pr) ， 我 们 知道 ，CU TT,，…,T4) 为 此 分 布 族 的 一 个 充分 统计 量 ， 
因此 ， 根 据 充 分 性 原则 ， 可 以 只 考虑 基于 它 的 检验 ， 根 据 引 理 
I.3.3，( 区 的 分 布 为 (此 处 了 = Ca IT) 
dPs, sl D =~00, pyexp[ ut pt ] dv ), ©, #) EQ, 
(3.3.37) 
人 可取 为 自然 参数 空间 ， 对 这 个 分 布 族 我 们 将 讨论 以 下 几 个 假设 
检验 问题 . 
Hi 0&h oo Ry: 0> th, 
Hs: O300¢> ERs: 0 一 bu 
Hs: 0—00 > Es gb 
Hs OIE Fs 0<0, 或 gb 
根据 引 理 1.3.4 在 给 定 T 一 # 时 , 开 的 条 件 分 布 @P8e 摧 
与 8 无关 且 仍 为 指数 族 ， 通 过 这 个 办 法 , 把 上 述 几 个 检验 问题 转 
化 为 单 参数 指数 族 的 检验 问题 ， 从 而 求 出 UMPU 检验 的 具体 形 
式 ， 


四 


我 们 有 
本 PT 一 人 (的 的 二 ， (3.3.38) 
在 这 个 条 件 分 布 族 下 , 检验 问题 五 :~ 及 ,i 一 1, 2, 8$, 4 成 为 音 
参数 指数 族 中 的 检验 问题 . 根据 系 3.2.2 及 定理 3.3.3 和 3.3.4 
在 这 个 条 件 分 布 族 下 , 五:<> 下 ;的 水 平 4 的 UMP 和 UMPU 检验 
分 别 有 形 式 : 
1° Hie Ky 
1, 当 wD, 
和 (有一 | ri(D, Gu, (3.3.39) 
0 当 v<0(, 
这 里 0<r( 介 必 1 ni 的 和 Ca 人 由 关系 式 
f oo ep tu, ave) —a (8.3.40) 
决定 .这 与 系 3.2.2 唯一 不 同 之 处 在 于 , 由 于 条 件 分 布 族 (3.3.38) 
与 所 有 关 , 检验 函数 办 Go 介 中 的 Ob) 和 71(8) 也 依赖 于 志 
2° Hye Es. 


1, 当 w<Ca (的 ， 
$a, 身 -so 当 w=0,(D, (3.3.41) 
0， 当 wr> 00, 
0 窒 fa( 信 二 1 Ta 和 Os 信也 由 (8.3.40) 定 晶 ( 改 办 为 加)， 
3° Ha** Eg: 
i, 当 包 Os (六 或 00 人， 
p= (3.3.43) 
0， 当 Ca uO 人 及， 
其 中 Or (A < 一 8 4 (A), OD, 《一 了 4, 满足 关系 
[oi(00) egs Cs, Wari) -a G.3.43) 
以 及 
f oiermipa eu, bar-a 00ers ty) . C3.3.44) 
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和 五 se 有 的 形式 与 各 他 为 无 异 ， 但 其 中 的 
‘WD 及 必 国 ,1 一 83， 4 销 足 关系 式 


[EBACE A Ddp(t) =a, j=1, 2, (8.3.45) 


以 上 作出 的 检验 和 一 虽然 是 以 二 给 定时 的 条 件 检验 的 形 
式 出 现 ， 但 只 要 把 上 也 看 作 是 变动 的 , 则 所 得 内 可 袖 为 4 1 的 活 
数 ， 因 而 得 到 相应 的 无 条 件 检 验 ， 下 面 我 们 证 明 ， 这 样 得 出 的 元 
条 件 检验 是 UMPU 检验 . 

定理 8.8.5. 设 参 数 空间 贞 的 内 点 了? 集 辣 非 空 ,日 在 Hx>K， 
中 所 涉及 的 7 一 由 1, 2, 者 满足 条 件 : 存在 op 至 (0，po E000， 
则 上 而 从 但.3.39) 到 人.3. 外 ) 所 规定 的 检验 加 分 别 是 豆 rer 尼 :的 
水 平 a 的 UNMPEU 检验 , $=1i, 2 3 二 

证 . 定义 w={p， (04 罗 EQ), j==0, 1, 3， 这 里 Bo 负 ，0， 
即 为 囊 : 咏 下 ,中 所 出 现 者 ， 根 据 定理 的 假定 可 知 , wy 作为 Bs 的 
子 集 ,其 内 点 和 集 3 非 空 。 由 号 .3.28) 知 , 若 如, 了 DD) 的 分 布 族 为 
(3.3.37, 则 了 的 分 布 也 是 指数 族 ， 


GPJe 人 = Oo tp erp 人 Ph ) dy OD, 

如 果 把 8 固定 为 色 划 工 的 分 布 族 为 指数 族 

G7—{aPhol) 0 (pyorp (Boe ) bot,, reo}, 

j=0, 1, 2., | 

由 于 ow 的 内 点 集 呀 非 空 , 卫 是 每 个 多 7 的 完全 充分 统计 其 。 记 
以 根据 定理 3.3.1 若 检验 由 他 全 对 象 wj 相似 , 则 有 

Eo, [pOU, 了 7) | 下 = 一刀 -et (a， e. 多 5 一 1, 22. (3.3.46) 
(这 里 吾 。 理解 为 oy.s 对 任何 wp 致 (0/，g) EQ， 由 工 在 上 的 
充分 性 ，Esr 与 元 关 因 而 可 写 为 及 a 为 四 的 功效 了 
歼 BW8, 四 在 wy 上 之 值 .》 

在 3.8.46) 中 可 以 有 一 个 多 8 测度 为 0 的 例外 集 了， 由 于 研 

了 指 吕 作为 了 at 的 子 集 的 内 点 。 
:6 
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是 指数 族 ， 对 一 切 忆 网 ER 有 了 09) = 因而 木 站 根 定 
人 3.3.46) 对 一 切 主 成 立 ， 现 在 我 们 分 别 讨论 每 一 个 Hi Ki 
1? 及 EI， 向 下 为 且 1<3 五 3 的 任 一 水 平 a 的 无 篇 检验 . 
出 于 ao 为 也 委 8 和 {B>>bi 的 公共 边界 且 因 为 如 ,9 服 及 指 
数 族 分 布 ， 任 一 检验 中 属性 的 动 效 和 通 数 应 加, 网 为 声 网 的 连 
续 通 数 , 有 Bs ,9) =a， 当 = 后 ， 导 下 对 集 wo 相似， 由 上 面 的 
讨论 知 , 四 满足 (3.3.46) 对 一 切 太 j= 从， 但 由 加 满足 (3.3.39) 
及 3.3.40),; 由 系 3.2.2 知 ; 必 有 | 
Es Lh tt, TT=HB,,s $0, DIT=H, > 
(8.8.47) 


Rs, [ha TD IT=H 0, OE. (8.3.48) 


且 


由 (3.3.48) 知 
Bb, O) = Bo, ol Bo, ohitU, TD TD), < 加， 
这 说 明 加 为 吾 1<3 区 1 的 水 平 & 的 检验 ,而 由 (3.3.47) 知 
Bld, p=— Bo, dL Bo, spiU, TT Eo, LB, Kp VU, TITY 
-Bt0, ), >h. 
这 证 明了 内 为 二 中 到 1 的 水 平 0 的 UMPU 检验 . 

2 五 ;3 攻 ，， 与 1 <*> 上 1 完全 相似 . 

3” 瑟 : 咏 玉 ,， 也 与 及 《3 大 1 基本 相似 不同 的 地 方 在 于 
零 假 设 与 对 立 假设 的 公共 边界 为 Uw 因此 五 se 五 < 任何 水 
平 a 的 无 偏 检验 四 满足 (8.3.46) 对 一 切 E71, 9, 而 由 9 满足 
(3.3.42) 及 3.3. 和 5), 用 定理 3.3,3 可知, 有 

Eo,s [ps CU 2) |= 
> [0 DT] 当 4< 抽 及 90> 押 ，(8.3.49) 
Bo,olbs(U, 四 IT-H Soe, HOS. (3.3.50) 
于 是 与 豆 i<* 1 的 情况 完全 一 祥 , 由 (3.3.50) 知 为 了 1Y 攻 
的 术 平 a 检验 , 由 3.3.49) 铬 
Be, WBld, p, A OE Rd, 
从 而 证 明 各 为 囊 4*> 太 4 的 水 平 & 的 UMPU 检验 . 


sn 


4 Haer sa， 设 办 为 日 3<3 后 的 任 一 水 平 a 的 无 偏 检验 ， 
则 根据 与 以 上 见 种 情况 相同 的 理由 , $ 满 足 (3.3.46) 对 一 切 $( 
一 0), 同时 ,由 作 的 无 偏 性 知 对 任何 加 定 的 p，Bs (9, 内 作为 乡 的 
应 数 在 9 一 ， 处 达到 最 小 值 , 再 由 分 布 族 为 指数 族 知 38,/86 存在 
且 可 在 积分 号 下 求 导 , 由 此 经 过 简单 计算 得 出 
Bo [DIE TY —aU] =0, 9€ wo, (38.38.51) 
记 VD = BL UbU, TD a IT -=H]. 
注意 由 了 下 对 分 布 族 8 的 充分 性 , 由 的 与 oEeo 无关, 由 (8.8.51) 
知 如 [KZDD] 一 0 对 任何 wpEwm0， 下 由 全 对 分 布 族 Gy8 的 完全 
性 , 知 
j=0 (a. 6. PN. 《3.3.52) 
根据 人 3.3.46) 式 下 所 作 说 明 , 不 芒 假定 (3.3 .52) 的 例外 集 为 空 集 ， 
因此 由 内 从 的 定义 得 
Eo [UP TT=H =0, [UIT =H, {3.8.538} 
对 一 切 t 这样， 我们 证 明了 五 .> 下 ,的 任 一 水 平 a 的 无 偏 检 
验 四 必 同 时 适合 (3.8.46), (F 一 0) 及 3.3.53). 以 下 的 证 明 与 前 三 
种 情况 完全 一 样 。 定 理 证 毕 . 
设 于 的 分 布 族 为 指数 族 (3.3.86) ， 有时, 我 们 所 要 检验 的 候 
设 不 是 关于 其 中 的 一 个 参数 , 而 是 涉及 到 诸 参 数 的 一 个 线性 组 合 ， 
即 令 ， 
人 一 cl 二 疡 : ip 
这 里 seo， …， qz 为 常数 旦 不 全 为 0， 为 确定 计 不 妨 就 设 ao**0， 所 
要 检验 的 假设 有 形状 办 所 外 , 乒 一 扣 等 等 . 这 不 难 化 为 定理 3.3.5 
所 处 理 的 情况 , 只 需 注 意 , (8.3.36) 可 收 写 为 
dPo,s (8) = 信人 由 ezp [OU (ew) 


+ oT Wd lo). (3.3.54) 

其 中 
Ur =U /oo, TP, $=1, ok, (83.3.55) 
下 面 举例 说 明 本 定理 的 应 用 ， 这 些 例 于 包括 一 些 常 见 的 重要 


390。 


RICE 


检验 问题 . 
例 3.3.4. 证 斑 一 Bim, m9), 了 ~ BG poe), Op <1, 一 上 
32. 五 , 了 独立 。 考 虑 假设 检验 问题 
Hi: Pep Ki Wr > po 
五 3 HH =p Ka, Fe, 
( 王 , 了 ) 的 联合 分 布 为 (gr=I 一 2 i 一 1, 2)， 


了 oo 三 一直 FF- = ©) eof 人 ) aa 
{YY®) won lo 
(2)(® ) araexpl y (oe Ya log 1 
+ (e+ 人 log 全 | 
1 
这 是 (人 .3.36) 的 形状 ,其 中 
和 =]lop PD or 下 一 lop2g nn=lor 到. 
Jog log OF apr log -or 
UT, PY)=Y, TIX, 了)=—ZX+Y, 
而 吾 1 下 I，Hat3 忆 ;分 噜 转化 为 
Hi, >00 EK!. 0<0, 
以 及 Ht. 6=00 下 a0. 
根据 定理 3,3.5 要 求 出 Hi G1, 2) 的 水 平 4 的 UMPU 
检验 , 需要 算出 结 定 了 = 至 十 了 寺 , TU= 了 了 的 条 人 忻 分 布 ， 易 见 


PY"(Y=y| T+T = -cg( 六 ja y=0, 1, ey £, 


(8.3.56) 
sa 


当 五 ! 成 立 或 互 * 息 立 时 ， 边 界 值 为 9 一 0 这 时 地 .3.56) 转化 为 
趣 几 何 分 布 


Pr yrtr-d -| 外) 人 


用 定理 3.3.5， 有 Hi<3> KK1, 因而 互 i<> 瑟 :的 水 平 x 的 UMPU 检 
是 是 7 了 se 


验 为 


1, 洲 qy< 人 你 十 幼 ， 
加 入 一 1 位 侈 十 的， 车 4 一 Ca 人 十 芒 ， 
0, 若 %Cate 十 骨 ， 


这 里 Catz 十 的 ， 站 (十 朋 与 2 十 和 和 问 有 关 , 由 关系 式 


-i mm 帖 ns 介 392 十 名 
[二 (nl ,0 (aA wty )= 
决定 。 注 意 0 科 记 人 十 扔 所 I。 类似 地 可 写 出 五 ss> 互 :的 水 平 a 
的 UMEU 检验 的 形式 ， 我 们 将 其 留 给 读者 去 完成 . 
例 3.3.5. 设 各， …， sn 为 取 自 驴 (@, 0o) 的 iid。 样 本 ,要 检 
验 仍 设 6 所 go, a 主 qo， 6 一 00. 
先 讨 论 一 0 的 情 视 ，(%1, 人 下 个 密度 为 
《2ma ezp (- 3 ) exp | 一 2 衬 只 + 所 ~ “], 


d=1 


(8.3.57) 
此 为 一 指数 族 , 其 中 
UD .3.58) 
这 时 ,检验 问题 


Hi: gg= 0 KL gO 
转化 为 五 1 8=0«*» KR!. 8¥0. . 
根据 定理 3.3.5, 并 考虑 到 分 布 的 连续 性 ， 知 Hi 到! 的 水 平 a 


的 UMPU 检验 为 
s ~ i, 当 UO 或 大 Do 的， 
下 {e 当 鸡 天 六 <Co 0). 

考虑 到 5S=U/Vi- Un 为 UD 的 严格 单调 孙 数 ， 粮 验 少 显然 等 价 
于 

1， 当 O10 或 有 >0,00)， 

下 4， 一 ~ 
PE ee Ho {fo 当 CL 0D <S<0,0, 

但 当 8=0 即 a=0 时 , 5 与 # 独立 ， 这 个 事实 不 难 由 定理 1.6.8 


电器 


(3.3 .59) 


-= 一 mm 一 一 re 一 一 mr rr 


推出 . 因为 , 在 se 一 0 时 ,上 二 分布 族 (3.3.57) 的 完全 充分 统计 苹 ， 
而 /二 1 服从 自由 度 为 wn 一 的 中 心 二 分 布 如 .与 ol 死 关 .这 
样 , 给 定 # 时 W 2 8 的 条 件 分 布 就 是 其 无 条 件 分 布 (在 9 一 0 
时 )， 即 和 1， 由 此 看 出 : 若 将 (8.3.59) 中 的 C409)， ,9 取 为 


EC— Vai 了 加 ($), CD 一 VY (和 
引 3.60) 


则 条 件 人 .3.48) 和 名 .3.4) 全 道 合 。 这 一 点 虽然 也 可 以 直接 证 
明 , 但 不 如 直接 去 证 由 《3.3.69) 和 和 (3.3.60) 所 确定 的 名 为 8 一 0 的 


无 偏 检验 (水平 八 更 容易 、 记 8- W 2 一 = 8 则 引 的 功效 函数 
B, ta, c) 为 


Pa (S| (人 ))=P (ltrol>t (9 $)). 


此 处 利用 5 1.14,( 四 ))# 分 布 的 性 质 a 知 访 一 本 15 而 3 一 Vna/oo 
再 由 上 分 布 的 性 质 e 知 , 当 gr0 时 ， 


Be a, o) =P (ls, sl ($$))>P (isl i ($)) 


0 B,(0, 0). 


{0 Vi [51 /YE D> 


为 否定 域 的 双边 一 样本 1 检验 ,是 
Hi: d=0*> Ei wr0 
的 水 平 4 的 UMPU 检验 , 
对 一 般 的 检验 问题 
五 :1，C 一 和 4 El Go. {3.38.81) 
只 需 用 变换 玉 ; 一 于 ,一 0 1 一 二 …, 就 可 化 为 mm=0 的 情况 . 
由 更 得 出 ; 以 


{e VE oa 人 ( 公 
_ 373， 


为 否定 域 的 检验 , 是 人 .3.61) 的 水 平 < 的 TMPU 检验 ， 
检验 问题 
Hy ta Eo. o> Goy (3.8.62) 
处 理 方法 完全 相似 先 设 mo=0， 则 检验 


1 ， 潜 WA S10), 


0， 若 VS<t na) 


有 (3.83.39) 的 形状 , 其 功效 项 数 为 

Bela, 0) = Ps, st (0)), d= Vna/o, 
依 上 分 布 的 性 质 Bu(w, 四 为 «的 增 泗 数 ， 且 当 4=0 时 其 值 为 
0. 因此 中 为 吾 se 在。( 其 中 mo= 念 的 水 平 a 的 无 偏 检 验 ， 再 由 
定理 3.3.5 推出 , 它 是 Hye> 下 (其 中 必 一 中 的 水 平 a 的 UMPU 
检验 .对 一 般 的 ao, 可 用 葡 述 方法 转化 为 so 一 0， 从 而 得 出 ， 通 党 
的 以 


{eo YS Ga) /YB D> 0)} 


(8.3.68) 

为 否定 域 的 单 边 一 样本 # 补 验 ,是 (3.3.62) 的 水 平 a 的 UMPU 检 
验 ， 问 题 *> at>s<ao 的 处 理 当然 是 完全 类 似 的 . 

在 例 3.2.4. 的 结 必 处 曾 指 出 ， 本 例 中 互 s< 天 :的 UMPU 


检验 (3.3.63) 在 a> 部 时 为 UMP 检验 ,而 当 a< 二 时 则 否 , 这 说 


明 , 尽管 条 件 检验 (3.3.39) 对 给 定 捕 时 为 UMP 检验， 但 作为 无 条 
件 检验 , 则 不 能 保证 它 为 UMP 的, 虽 则 并 不 能 排斥 它 可 以 是 UMP 
检验 的 情况 ， 然 而 ,对 零 假设 为 -如 或 负 近 gs 负 的 情况 ,由 定 
理 3.3.5 确定 的 DMPU 检验 决 不 可 能 是 UMP 的 . 
例 3.3.6, 闻 上 鲍 , 但 考虑 的 检验 问题 是 
Hi oo Ki: o>>ot, 
Hs oo Kg, orot, 
Ha: c= 天 so 一 0 


$$ mi, Sy ve) 全 


| 


先 讨论 万 2e> 及 。， 由 (，…， 环 的 密度 (3.3.57) ,及 (3.3.58) 
式 , 利用 定理 3.3.5， 知 水 平 & 的 UMPU 检验 为 

1 当 习 2i<c 人 人 ) 

PF, oy 芷 ) 一 ， 

0, 当 守 X72>0 (SX ) 

#1 t=1 香 


这 显然 等 价 于 | | 
: 当 DE (TX), 

$F 本 互 由 一 ， 加 ， 
0， 当 站 (K 一 下 ?> (Sx,). 


取 从 (一 验 101 一 03， 则 检验 $ 的 功效 西数 为 
po od ~ Pao [BY (FE) 0) d/o | 


由 8 1.T (二 ), 类 分 布 的 竹 质 0, 知 冲 (一 慎 )3/o*~ 居 -1 放 


Bfla, oN =P(r daat/on). 
总 然 为 o? 的 下 降 函 数 , 且 在 o?=0o$ 时 之 值 为 a ， 这 一 举证 明了 ， 
通常 的 以 
{Do 
为 和 否定 域 的 检验 ， 是 右 2 咯 请 ;的 水 平 n 和 的 UMPU 检 验 ， 至 于 
五 , 心 下 1, 在 例 3.2.4 中 我 们 已 求 出 其 UMP 检验 , 它 自 不 待 衣 也 
是 UMPU 检验 .在 此 我 们 又 看 到 上 例 末尾 处 指出 的 现 锭 ， 即 定 
理 3.3.5 所 讨论 的 五 /> 玉 ,j=1, 2 的 UMPU 检验 ， 虽 风 在 固 
定时 的 条 件 检验 是 UMTP 的 ， 然 而 作为 无 条 件 检验 可 以 是 UMF 
也 可 以 不 是 . 
对 Hs*» Ks 而 膏 ， 完全 同样 的 推理 证 明 ; 形 如 
T， 当 习 (天 ,一 于 )s<oy 或 2oa 
PKL 1 TR) — ™ (3.3.64) 
LI 当 oa< 疡 (一 至 )2oy 
的 检验 为 水 平 & 的 UMPU 检验 , 只 要 适当 选择 mm，o 致 


= B13. 


下 《各 一 avr=1—o (3 .3.65) 


ol 


cak (名 n—1)—ch (等 


这 里 (sjn 一 办 为 如 -1 的 密度 函数 . 道理 是 明显 的 前 一 式 保 证 
了 检验 的 水 平 为 mw 后 一 式 保证 了 功效 炒 数 在 0? 一 o3 时 达到 最 小 
是, 因而 包 为 水 平 & 的 无 偏 检 验 , 它 又 有 如.3.64) 的 形式 , 于 是 据 
定理 3.3.5, 它 是 五 se> 五 s。 的 水 平 a 的 UMPU 检验 . 如 前 所 指 
出 , 它 决 不 会 是 UMP 的 。 . 

要 由 (3.3.6 司 和 (3.3.68) 决 定 6 es, 需 用 分布 表 , 用 试探 
法 决定 。 一 般 常 取 


本 一 入 1 (一旦 ) co (So 
这 个 取 法 保证 了 所 得 社 验 (3.3.6 名 的 水 平 为 a， 但 不 是 严格 地 元 
人 篇， 然而 , 除非 mm 很 小 , 去 无 仿 检 验 亦 不 甚 远 ， 
例 3.3.7， 设 瑟 b 到 m 为 取 自 总 居 友 (的 的 种 .样本 ， 

也， … 了 ,为 取 自 总 体 入 (oo) 的 iid， 样 本 ， 丽 万 2， …， 申 
了 …， 了 全体 独立 ,考虑 检验 问题 

Hi ob er Ky. ob, 

Hy ob er Es wib, 

Hs: a—b*Y Ks: oF 6b. 


每 出 (Xi Wi Ye 的 联合 密度 ， 不 难 验 证 它 可 
表 为 指数 族 


n-1)=0. (3.38.60) 


Ga, §, vexp[O Ut prt pa Ta] 
的 形式 ， 这 里 如 (65, 0 为 一 只 与 4, 5, a (及 mm, 和 0 有关 但 号 
如 了 ;无关 的 数 , 而 


厅 = 素 一 素 天 一 mm 刘 上 + 了, Ty- 人 二 
i j=1 


mh — a) _ moat ne _ 1 
6 3 十 名 o P= mi do 
问题 吾 1*3 五 1 转化 为 


和。 


Hy: 2001 0<0. 
我 们 证 明 ; 通常 的 两 样本 + 检验 


VE.- -T+ Time 0), 
o # YEED -nD/ 

VED +tEE DD ~ 了 :+(Y- ic a 0), 
是 且 1 > 下 1 的 水 平 & 的 UMPU 检验 ， 为 此 注音 


FE-Z) /YBE- D+D 7 
-0 /yy Di 


在 (Ti, TD,) 给 定时 为 的 严 客 增加 消 数 , 这 样 , 上 面 所 定义 的 检 
验 加 有 G8.-3.41) 的 形状 根据 定理 3.3. 为 了 证明 检验 中 为 

1 到 的 水 平 & 的 MPU 检验， 上 内需 证 明 它 是 水 平 a 的 无 篇 
检验 ， 记 


ne 多 站 3 时 和 
CNET A TT TT 
根据 81.1 (四 ) 的 # 分布 性 质 b 知 当 对 ,和 了 ,的 分 布 分 别 为 
Ng, o9 和 百合 eg 时 ， Swiss 其 中 


(3 十 他 一 有 py, _ 
B= fb a /oo, 


所 以 下 的 功效 函数 为 
Bm b, ~—P CP 
再 由 1 人 妇 布 的 性 质 o 知 当 瑟 成 立即 6224 因而 620 时 ， 有 
Ba, b, 四 So 而 当 5<a 有 归 3<0 时, 有 局 (9, oa。 这 证 
ee 因而 是 水 平 6 的 UMPU 检验 。 
Hi b—axoer Ky b—a<ist, 


我 下 2 sy 太一 


Ee aa rt 


可 通过 六 换 及; = 至 ,十 0， Fs = 化 为 a=0 的 情况 ， 从 而 得 凶 其 
水 平 的 UMPU 检验 有 否定 域 
{zs oe, Ea, Fis os Ye) 一/ 


72 十 竹 


YD Yi 0)}. 
对 检验 问题 
五 Bb—awce Ks b—aro 


用 完全 同样 的 方法 证 明 ， 通 常 的 以 
{x» I 了 0 Fs 2 | 一 -Xl/ 


4 DIG 4b A (2)} 


为 否定 域 的 双边 两 样本 t 检验, 是 水 平 a 的 UMPU 检验 . 
例 3.3.8， 设 焉 ，, "9 本 和 了 2 工分 别 为 自 交 (eq， oF) 
和 六 名 oa 中 抽出 的 员 ， 样 本 , 且 开 a， "全 
体 独 立 。 考虑 检验 问题 
Hi vi<oier Ki. oft>o®, 
五 >， oo > KF, 2072 
Hs: vi~oier Ks: of¥ oa 
寄 出 (1, ng bp 了 了 1， 了 指 联合 密度 ， 知 有 指数 庶 
Ga, b, or oorp OU + pT po Tet pe TH) 
的 形状 ， 的 


0 mo 全 mm- 咎 


yb T= 入?+ 训 也 T= 这 ， 2 一 了 
根据 定理 3.8.5, 水 平 s 的 UMPU 检验 有 形状 
2 着 妆 73<oCro To T,), 
(1, ey .0 Fy, ”3 了 一 一 
0 车 名 了 >0 (TD 了 >， 2。 
+ 27Be 


1 LL s i1 机 
由 于 “二 加 他 -了 / 了 以- 

-二 -9/ 人 二 mT-D} 
在 镶 定 TTD 时 为 的 严格 泊 加 机 数 , 上述 接 验 等 从 于 ; 所 


pi 并 
)-{» 车 P&GOCTD,, T,, Ta, 
" 0， 若 一 OCT Ts, TD, 
现职 如 (T Ts T3) 一 下 -lot 代 一 内， 由 各 于 , 工 ( 五 )， 百 分布 的 
性 质 有 和 斋 当 ~ Nn, o3), 了 ;一 六 二， v2) 时 ， Fai/ogi ~ Fy, 天 一 了 
故 知 由 的 功效 函数 为 
ps b, ou 思 一 P(FaS/ag<otPw au a all—0) /oD 
oF 
=P (Fs, wi Pay, e211 — 6) ) 
这 显然 是 比值 4 一 og#/os 的 上 升 函数 , 旧 当 4 一 1 时 取 值 4。 这 一 举 
证 明了 中 是 五 tsy> 五 1 的 水 平 a 的 元 迟 检 验 ， 央 而 是 其 水 平 w 的 
UMPU 检验 .更 一 般 的 情况 
五 加 repoie Ei oi> do3, 

可 通过 变换 了 i 一 4 有 ,了 Yi 一 了 转化 为 4=1 的 情况 . 又 ,， HyerEs 
的 处 理 是 完全 类 似 葛 . 

对 五 :下 4 而 言 , 也 是 用 定理 3.8.5 不 准 证 明 : 其 水 平 “ 的 
UMPU 检验 有 形状 
PTY Rm 了 了 


$I yg 开 m Fy, “TF 


一 站)<ei 或 守 0， 
0， 当 a< 直 二 窜 (PY)? 一 至 )2<<oa， 
(3.3.67) 
而 oa, oa 应 选择 之 使 满足 
人 reln- m—1)dvmI-a (3.3.68) 


Of 01|n—1, 说 一 二 一 的 了 (oj 一世 m1). 
» Bye 


此 处 f(z|p, 四) 为 自由 度 为 p 和 g 的 中 心 分布 的 密度 函数 ， 由 
此 两 式 决定 cy 62, 禹 借助 于 到 分 布 玫 ,用 试探 的 方法 , 一 般 常 取 


= Fol, um :人 -4), Ca = Fs 1, m1 (Ss), 


这 个 取 法 保证 了 由 (3.3.67) 确定 的 虽 为 五 ;> 天 的 水 平 6 的 检 
验 ， 但 不 是 严格 无 偏 的 ， 但 当 m, nn 不 太 小 时 ， 去 无 偏 性 并 不 其 
远 ， 


§ 3.4. 不 变 检 验 


(一 ) 基 本 概念 


关于 一 统计 判决 问题 在 某 变换 群 下 的 不 变性 ， 以 及 不 变 兰 决 
通 数 的 概念 , 在 $2.4 中 已 作 了 介绍 。 将 其 应 用 于 假设 检验 问题 ， 
就 得 到 所 请 “不 变 检验 ”的 概念 . 
”” 设 变量 的 祥 本 空间 为 (名 多), 分 布 族 为 (Po, 9E9), 假定 
当 生 于 而 时 , Po 子 Pa。 设 侣 为 一 个 群 , 其 中 每 个 元 9g 是 从 到 名 
土 的 一 一 变换 , 满足 条 件 
1° 每 个 gEG 是 可 测 变换 , 即 
E> AE 对 人 尾 何 45 禾 5, 
2” 对 性 何 8E6 及 gEG, 存在 EB, 至 
Pg-14) =Ps(4)， 对 任何 AEB» 
记 9=90, 在 $2.4( 一 ) 中 证 明 过 , 了 是 日 到 8 上 的 一 一 变换 ， 且 
由 一 切 gEG 所 导出 的 一 切 了 构成 一 个 群 豆 
现 设 Bs 为 日 的 -- 个 非 空 真子 集 ， 考 虞 检验 问题 
五 : EOreo KE, E00— Or=Br. {3.4.1) 
定义 3.4.1， 称 检验 问题 (83.4. 卫 在 变换 群 全 之 下 不 变 , 若 对 
性 何 9E 如 有 Bs 一 Bz， 这 等 价 于 
dEOr oO 90 EH, OEOr = 0 EOr. 
设 由 (四 为 问题 (3.4.1) 的 任 一 检验 函数 , 满足 条 件 
$90 =$tm)， 对 任何 “EE 及 gyEG, (3.4.2) 
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则 称 乡 为 变换 群 所 之 下 的 一 个 不 变 检 验 . 

这 些 峙 念 的 直观 背景 在 $ 2.4 中 已 有 说 明 ， 为 了 帮助 理解 ， 
考虑 几 个 简单 例子 . 

例 3.4.1. 设 互 ，，…， 开 nm 和 了 ，…， 了 了 。 分别 为 自 总 体 
Ca, 0 入 C5, 0) 中 抽出 的 iid. 样本 , 且 是 1 在 m 了 2 
荆 全体 狂 立 ， 考 虑 检验 癌 题 

H. s=b > Kf. a {8,.4.3) 
一 切 形 如 多: 各 一 十 6 一 1 一 摇 十 0 

| 一 二 和， 一 co 
的 变换 构成 一 个 群 。 负 在 日 ={ke, b, 呈 :一 ceo<6<<co 一 co< 
<cce,， 0<o"<cojy 上 的 导出 变换 为 

(ee 02 = ure, b+o, on). 
由 此 可 知 , 检 验 问题 全 ,4.8 在 还 变换 群 下 不 变 , 而 不 变 检 验 为 潢 
中 条 件 
pm m0 二 0, -Yn 二 
一 二 (对 任何 ER 
的 任何 检验 . 

在 本 铺 中 , 变换 群 @ 中 尾 一 变换 相当 于 度量 原点 的 改变 .不 
变 检验 的 意思 是 ， 蚌 否 接 受 零 假设 不 应 与 这 种 改变 有 关 ， 这 从 实 
用 的 观点 去 考察 是 自然 的 要 求 ， 我 们 前 此 在 例 3.3.7 中 得 出 的 两 
样本 1 检验 , 显然 符合 不 变性 的 要 求 . 

便 8.4.2， 设 于 1,…*， 下 ,为 取 自 总 体积 (0, 0) 中 的 iid, 样 
本 ， 淮 虑 检验 问题 

BH, oeoiey EE, oo?, {3.4.4) 
以 全 记 出 Bn 到 自身 的 正 交 次 换 所 构成 的 群 。 握 引 理 1.1.1, 对 
性 和 何 gEG, 9g( 及 1，…， 防 。)》 的 分 布 与 ( 旦 1，…-， 玉 胞 完全 一 样 , 于 
是 不 变性 条 件 适 合 ， 而 不 变 检 验 为 任何 满足 条 件 

$0 -9 的 ， 当 lz 一 的 | 


的 检验 ， 这 无 异 科 要求， 由 是 疡 的 函数 . 


I: 


本 例 的 直观 舍 义 也 大 很 清楚 的 ， 宙 于 (Eu *…， 下 ) 的 分 布 
关于 原点 对 称 且 与 坐标 轴 的 取 法 无 关 ， 是 否 接受 有 堆 假设 也 不 应 与 
坐标 轴 的 取 法 有 关 ， 因 此 对 试验 者 而 言 , 若 两 个 样本 点 4m, 9 满足 
1z| 14g1， 则 二 者 中 所 包含 的 关于 分 布 参数 的 信息 完全 一 样 。 因 
此 ， 检 验 沙 数 中 在 ss 点 处 之 信和 中 tw); 不 应 当 异 于 其 在 y 点 之 
值 贡 人) . 

在 8 3.4 中 我 们 曾 引 进 “ 极 大 不 变量 ”的 概念 ， 拿 群 台 而 言 ， 
称 统计 量 m(w) 《其 样本 空间 姑 记 为 (已 级 四 ) 为 报 大 不 变量 , 车 

mmm) 一 他 人 全 存在 9 好 致 如 一 9 
类 似 地 定义 如 的 极 大 不 变量 。( 罗 ,下 面 的 简单 结论 成 立 ， 

引 理 名 ..1，1°$(w) 为 不 变 检 验 的 充 要 条 性 为 上 是 Co) 的 
函数 ， 即 存在 定义 于 -上 的 函数 入 致 了 C0) 一 hm(0))，2°. 着 
se( 护 为 不 变 检验 中 的 功效 函数 , 则 它 必 为 v0) 的 函数 ， 换 句 话 
说 , 存在 函数 致 司 ( 人 (一 8 人 人 全 )。， 这 等 价 于 ， 若 存在 了 E 弛 和 致 
BO =—g, WM B,C0) 一 名 (0)， 

证 . 1° 是 显 灼 的 ，2° 由 9 的 定义 推出 : 

B60) = Bo [p(XF)] = Er th (FZ)] = Eo,tg (yg¥)] 
— Heol$ (FE)] = 8,00). 

由 这 个 简单 的 引 理 泪 出 两 件 事 情 : 一 是 车 检验 有 不 变性 ， 则 
它 对 满足 条 件 细 #8 只 的 负 和 完全 无 法 鉴别 (二 总 有 (861) 
一 有 tw)， 这 表示 对 不 变 检 验 而 言 ， 四 中 每 条 轨道 实际 上 可 看 作 
一 点 ， 从 这 个 观点 堵 , 采用 不 变 检 验 的 后 果 相 当 于 参数 空间 , 即 分 
布 族 的 缩小 . 

从 引 理 得 出 的 另 一 点 是 : 采用 不 变 检 验 等 价 于 只 考虑 基于 
mt{2) 的 检验 .以 28 记 各 ( 互 ) 在 w 的 分 布 为 Ps 时 的 导出 分 布 ， 
唱 由 于 上 只 考 虚 基于 m(w) 的 检验 , 问题 由 原来 的 分 布 族 (Po 9E9) 


转化 到 分 布 族 (PY, 9E 6)， 拿 例 8.4.2 来 说 , m() = 六 X? 的 


分 布 为 oz， 所 以 ,在 只 考虑 不 变 检 验 时 , 问题 相当 于 从 一 个 其 分 
布 为 wx 的 观察 值 只 去 检验 假设 o* 所 ci， 这 当然 使 问题 大 为 化 


s 


a 


简 . 有 - 
由 以 上 讨论 可 以 君 由 ， 不 变 检验 这 个 概念 可 以 从 俩 个 角度 去 

理解 ， 从 实用 角度 说 , 它 是 基于 具体 问题 中 所 固有 的 某 种 性 质 , 因 

而 可 以 合理 地 要 求 所 采用 的 检验 应 具有 的 一 种 和 应 的 性 质 ， 从 理 
论 角度 说 , 它 无 非 意味 着 一 种 缩小 所 考虑 的 检验 的 范围 的 方法 . 而 
这 常 相当 于 用 一 较 笛 化 的 问题 代 厦 原来 的 较 复 杂 的 问题， 然而 ， 

应 当 了 解 , 这 并 不 是 说 经 简化 后 的 向 题 与 原 间 题 是 等 价 的 . 


二) 一 臻 最 优 的 不 变 检验 (Uniformly Most Powerfol Inva- 
riant Test, 简称 为 UMPI 检验 ). 


沿用 前 面 的 记号 ,我们 立 如 下 的 定义 . 

定义 8.4.2. 设 少 为 问题 (3.4. 攻 的 一 个 (在 群 G 之 下 的 ) 水 
平 a 的 不 变 检 验 ， 着 对 (3.4. 了 的 任 一 (在 群 全 之 下 的 ) 水 平 a 的 . 
不 变 检 验 儿 都 有 

Bi(0) <<Be(0)， 对 任何 9E Bu， 

则 称 史 为 (3.4. 二 的 (在 群 纪 下 的 ) 水 平 a 的 UMPI 粮 验 ， 

设 和 人 ) 为 群 @ 之 一 极 大 不 变量 , 以 (4 弛 力 记 其 样本 空间 ， 
CR? 9E6) 记 m(X) 的 导出 分 布 族 .根据 (一 ) 中 所 述 及 定义 
3.4.23， 立 著 得 上 

避 理 和 -4.2. 区 为 分 布 族 {(2 9w， Ps), 9E9} 中 检验 问题 

(8.4. 汪 在 群 G 之 下 的 水 平 < 的 UMEI 检验 的 充 要 条 件 是 。 它 是 
分 布 族 T(A; 鲍 o PY),0E6} 中 同一 检验 问题 (8.4.1) 的 水 平 a 
的 UMP 检验 . 

这 个 引 理 提供 了 一 个 求 UMPI 检验 的 方法 ， 我 们 举 几 个 简单 
例子 . 

例 3.4.8， 考察 例 3.4.2, 记 内 = 总 吧 则 mm 为 极 大 不 变量 . 


如 前 指出 ， 和 m 的 分 布 族 为 【8(oa)dm， o>0}, 其 中 
fy (om) -E> (BO)] mop(- BB > 
0 人 < 


根据 系 3.2.2, 在 中 分 布 族 下 , 霍 假 设 o2<<o3 的 水 平 a 的 UMP 窒 
验 有 否定 域 fa; m2obxato)}。 因 此 得 到 在 所 给 变换 群 下 ， 


《3.4. 人 0 的 水 平 4 的 UMPI 检验 有 否定 域 {Cm …, vn): 疡 7 
>oBx? (0)}. 

例 83.4.4. 设 下 1，…， 下 ,为 id, 祥 本 ， 了 X: 的 分 布 为 

PAYI=l) -1— PX-0 -0, 0<0<1, 

杰 检 验 五 ; < > KE. > 

考虑 变换 群 G: G 中 每 一 个 变换 9 为 (wmw，…, 各 ) 的 一 是 换 : 

gs 1 tn) = pi 和 ou) 

这 里 (5 …， 动 为 (1，… 堆 的 任 一 置换 。 故 G 共 包含 ml 个 元 
不 难看 出 ，G 的 一 个 极 大 不 变量 是 各 = 疡 wu， 转化 到 吧 后 ， 因 
m~8(n, 0), 问题 变 为 在 Bn, 中 检验 gbo, 由 系 3.2.2 知 ， 
这 个 问题 的 UMP 检验 存在 ， 故 原 问题 在 所 给 变换 群 下 的 UMPI 
检验 也 存在 ， 在 例 3.2.2 中 我 们 证 明 过 : 这 个 UMPI 检 验 实际 
上 就 是 UMP 检验 , 

在 以 上 两 例 中 由 于 有 简单 的 极 大 不 变量 存在 ， 求 UMPI 检验 
的 问题 便 昂 于 解决 

例 3.4.5， 设 在, …。 无, 为 取 自 对 (a, 0 中 的 iid, 样本 ， 
考虑 检验 问 是 

H, a<00 KE,; s>0, (83.4.5) 
考 嵌 变换 群 引 一 {go, o>0j, 其 中 
go 1, Vn) = (O01, ot, On)s 
不 准 验 证 , (3.4. 久 在 此 变换 群 下 不 变 ，gs 的 导出 变换 名 是 : 
Vofe，c) ~ (ot, co), 
变换 群 9 的 一 个 极 大 不 变量 是 3 
m(w) (各, ， 2 ). 

然而 , 这 个 统计 量 的 分 布 不 易 求 出 , 因而 在 这 个 基础 上 去 求 UMPI 


1 由 于 分 布 族 是 连续 的 , 可 以 在 样 坏 空间 Bn 中 云 掉 第 一 坐标 多 为 0 的 那些 点 。 


+ 


检验 就 不 容易 . 但 是 , 本 例 中 有 充分 统计 量 g 一 《gs, qs) 一 (位, 6)， 
其 中 S- (名 (一 卫 ))v3， 变 换 群 G 如 作用 在 g 上 ,成 为 


golq1 2) = (oq, C949), 
而 一 个 极 大 不 变 十 是 这 =gi/ga， 也 可 以 取 为 


m= Vim -Dum Vi/ 二 工 宫 (X 一 和 )， 


其 分 布 族 汶 分 布 族 证 -um 一 ce<6<col， 在 此 分 布 族 之 下 ， 
检验 问题 (3.4. 辐 转化 为 
H. $0 Kk. 8>0, 《3.4.6) 
d= {mm: mt } 
为 否定 域 的 检验 是 他 .4&.6) 的 水 平 & 的 UMP 检验 , 因为 , 根据 定 
理 3.2.83 ( 取 先 验 分 布 和 使 其 测度 集中 于 5 一 0 一 点 ); 具 需 验证 两 
(a》 此 检验 的 水 平 海 a (对 问题 (3.4. 人 6))， 
《by 对 任何 名 >>0， 以 4 为 否定 域 的 检验 是 问题 
H', $=00 KE', $= 
的 UMP 检验 ， 
(a) 立即 从 主 分 布 的 性 质 e 得 出 . 至 于 加 ) ,不 难民 Neyman- 
Pearson 基本 引 理 , 及 ( 见 公 式 仁 江 .16)) 


一 工 i 
3 (a) (4) 


得 出 。 这 里 六 * |% 加 表 自 由 度 为 #& 非 中 心 参数 为 8 时 的 分 布 
的 窗 度 函数 , Om, 多 >0 上 只 与 .有关 的 常数 , 因为 (3.4.7) 右 边 
显然 是 mw 的 严格 增加 函数 。 这 样 ， 我 们 证 明了 : 例 3.3.5 中 求 出 
的 UMPU 检验 , 即 一 样本 主 检验 , 在 上 述 变 换 群 下 也 是 UMPI 检 
验 . . 

例 3.4.6. 设 和 基 1,…, 闻 ,为 自 驴 (a, 0) 中搜 出 的 iid. 样 本 ， 
考虑 检验 问题 

H, exo Kk, o*<oah, 


它 在 平移 变换 群 
Mm 1, oooco0 
之 下 不 变 , 用 与 上 例 完全 相似 的 方法 , 转移 到 充分 统计 量 ( 全 ,59?) 
去 讨论 , 不 难 证 明 互 们 五 在 此 变换 群 下 的 UMFEI 检验 存在 , 且 就 
是 例 3.3.6 中 求 出 的 UMPU 检验 ， 我 们 把 细节 留 给 读者 自己 去 
完成 . 
例 3.4.7. 考虑 鲍 3.4.1， 设 群 他 由 如 下 形式 的 变换 档 皮 ， 
Md, bl 一 区 十 四 一 了 + 
其 中 一 co<c<eo, 0<9<o0， 容 易 置 出 ,被 验 问题 
. H. aubey KE, o>b 
在 此 变换 群 下 不 变 ， 
本 全 有 充分 统计 量 


7 (了 7, 5), 8- [z+ DD 

车 将 群 G 的 变换 作用 在 中 上 , 则 得 形 如 
XT'=d( 人 +0, Pr~d(F +4), Hd8 

的 变换 。， 不 难 验 证 其 一 极 大 不 变量 为 9 ( 节 一 于 ) /5， 也 可 以 取 
为 极 大 不 变量 , 9 的 分 布 族 为 {fn_s, 5， 一 co 一 3 一 coj, 于 是 问题 - 
转化 为 与 (3.4.6) 完 全 一 样 。 因 此 得 出 ， 在 上 述 变换 群 下 , 检验 问 
稻 了 及. a 志 b or 大, a>>b 的 UMPT 检验 存在 , 且 就 是 侧 3.8.7 中 求 
出 的 UMPI 检验 一 一 两 样本 f 检验 . 

例 8.4.8， 考 虐 例 3.3.8 中 的 检验 问题 

H. cicoie> EK. ofaot. (3.4.8) 
设 群 G 由 如 下 形式 的 变换 构成 : 
Md on $l1, ,ms Wy os, 了 一 了 

其 中 0<d<oo， 一 co<ier，54 达 co，、 此 问题 有 充分 统计 量 了 T= 
( 斑 , 了 ， 54, 8， 此 处 


(I | (一 多“ 


昌 至 记 三 


如 将 群 G 中 的 变换 作用 于 上 , 将 有 
Kra to, FraP ro, 和 一 op 9 dg3. 
由 此 不 难看 出 ， 了 58/54 为 一 极 大 不 变量 ， 也 可 以 取 


q+ 9 1 /i 


为 极 大 不 变量 。 利 用 媚 分 布 的 性 质 册 5 g~ 刀 cu ma 于 是 

得 出 g 的 密度 函数 为 ( 见 1.1.20) 

Ja(g) -| Om, 1) 4s Cm—1+ nD) sg 1", g>0, 
0, gq<0, 


其 中 4 一 嘻 /o3， 转 移 到 此 分 布 旋 后 , 问题 (3.4. 纺 转化 为 
五 , A>1eF, 4<1. (3.4.0 


不 难 证 明 ， 以 

Le 一 19: CS mACl—o)} 
为 否定 域 的 检验 , 是 (3.4. 引 的 水 平 a 的 UMP 检验 。 验证 的 方法 
与 例 3.4.5 完全 相 羽 , 我 们 把 它 留 给 读者 去 完成 ， 这 样 , 证 明了 ， 
例 3.3.8 中 求 出 的 以 


{Fs “2% Yo FD: BD /SD 
i | Fay, wa 一 中 

为 和 理 定 域 的 检验 ,是 在 上 述 变 换 群 下 的 水 平 上 前 UMPI 检验 ， 以 
上 诸 例 求 出 的 UMPI 检验 也 大 UMPU 检验 , 以 后 将 看 到 , 这 不 是 
俩 然 的 巧合 . 

例 3.4. 失 . 设 基 产品 的 一 项 扎 标 且 服 从 正 术 分 布 NN(4, 四， 
只 有 当 指 标 值 不 小 于 基 个 名 时 ， 产品 才 是 合格 的 ， 现 从 随机 抽 得 
的 人 忻 产品 中 测 得 指标 信和 为 莹 1，…， 至 。( 视 作为 访 (4，o) 中 的 
ii4， 样本), 要 检验 假设 

H: pppoe EK, p> po 

。 D 本 便 依 出 第 一 举 习 通 8。 


此 处 2 为 产品 的 废品 率 . 
显然 p-56 (=®). 转化 到 且 一 王 , 一 出 $=1,…,n 去 讨论 ， 
可 以 假定 w=0, 这 时 p= 多 (一 乞 ) 记 =-@7(po), 即 (Eo) 一 po. 


则 Pp 所 po 等 价 于 一 和 <to， 或 二 >>go(go 一 一 5 于 是 得 到 (3.4.10， 
的 等 价 问题 

互 :二 >>bo cy K: SE<h. (3.4.10) 
在 例 3.4.5 的 变换 群 下 这 个 检验 问题 保持 不 变 。 因此 , 按照 在 该 
例 中 所 作 的 论证 , 取 极 大 不 变量 一 Maw 一 楚 时 / V 宫 CE 一 Z7 


检验 问题 全 .4.10) 转化 为 1 分 布 族 {1,4} 中 检验 

H, > RK, $<h. (3.4.11) 
根据 第 一 章 习题 8, 分 布 族 {a + 中 有 单调 似 然 出 ， 根 据 定 理 
3.3.2 (3.4.11) 的 水 平 x 的 UMDP 检验 ， 即 (3.4.10) 的 水 平 a 的 
DMPI 检验 , 有 否定 域 


CE EC e-a< 中 


其 中 e 由 了 (wz wa<so) 一 a 确定. 

在 例 3.4.5 一 3.4.9 中 , 我 们 都 使 用 充分 统计 量 ， 这 样 简 化 了 
样本 空间 因而 简化 了 极 大 不 变量 。 然而， 严格 说 来 在 推理 中 有 一 
点 不 足 之 处 , 即 , 虽然 报 据 充分 性 原则 , 可 以 限于 只 考虑 基于 某 充 
分 统计 量 的 检验 ， 但 这 并 不 等 于 说 , 在 考虑 关于 一 变换 群 的 不 变 
检验 时 , 可 以 限于 只 考 虐 基于 某 充 分 统计 量 的 不 变 检 验 ， 然 而 ,在 
后 面 我 们 将 证 明 , 至 少 在 以 上 诸 例 , 这 样 散 是 可 以 的 ， 

无 偏 性 和 不 变性 都 是 对 检验 的 整体 性 质 提出 的 要 求 。 这 种 奢 
求 缩小 了 记 考 虑 的 检验 的 范围 ， 这 两 个 原则 的 应 用 范 困 当然 不 全 
一 样 。 例如, 在 例 3.4.4 中 ,车 要 捡 验 0 一 如， 则 不 变性 无 法 使 用 ， 
但 UMPTU 检验 存在 ， 反 过 来 , 以 后 我 们 将 会 省 到 ， 有 一 类 多 参数 
的 检验 问题 , 不 变性 可 以 使 用 但 TMPTU 检验 不 存在 ， 在 非 参 数 统 
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计 方 法 中 , 我 们 还 将 看 到 不 变 原 则 的 重要 应 用 ， 


(三) 几乎 不 变 失 验 (Almoet Invariant Test) 


为 了 回答 上 让 末 尾 提 出 的 问题 , 以 及 以 后 的 应 用 , 着 莫 把 不 变 
检验 的 概念 路 加 推广 . 

设 浆 的 样本 空间 为 (各 党 四， 分 布 旋 为 (Po 6E 的 , 设 检 验 
问题 (3.4.1) 在 变换 群 旨 下 不 变 。 为 简单 计 , 假定 存在 络 w 上 的 
9 有 限 测 度 ww 致 CPs, 9 一 jp， 即 

0P(lAd)=0 对 任何 8E8. 

定义 名 .4.3. 设 沙 为 一 检验 函数 ， 车 存在 一 个 在 群 如 之 下 不 
变 的 检验 函数 由 以 及 jr 志 测 集 4， 致 由 人 9) == 中 (Ww) 当 w 志 44， 风 
称 玫 对 等 于 一 不 变 究 验 . 

车 中 为 一 检验 。， 且 对 任何 gEG 存在 (与 9 有 关 的 ) :rr 零 测 
集 碎 ,， 狼 吕 二 四 8) 当 ww 七 玉 ， 则 称 由 为 一 (在 群 杂 下 的 ) 几 
平 不 变 检 验 . 

引 理 3.&.3， 洲 中 对 等 于 一 不 变 检 验 ， 则 由 为 世 乎 不 变 检 验 . 

证 . 由 内 (5) 一 站 (0 当 闷 合生 知 贡 (00 = 上 0D), 当 Ed 
再 由 音 (827 一 由 (6) {对 一 切 区 知 

由 (gp) 0), BwEAUg tA. 
因此 ， 只 项 证 明 上 4 一 0 由 有 td 一 0 知 了 id 一 0 对 一 切 
8c8.， 于 是 由 在 群 们 下 的 不 变性 知 Poy 4) = Pys(4) 一 0 对 一 
切 8E 如 再 由 (Pe, EG 外 ~ 点 知 L914) =0, 得 证 . 

在 一 定 的 条 件 下 ,上 述 引 理 的 逆 也 成 立 . 我 们 假定 ,在 侣 中 可 
引进 oo- 域 Wa, 

定理 3.&.1， 在 上 述 记 号 下 , 假定 

1? 变换 (多 分 一 疙 是 ( 线 xG， 尝 wxXSa] 到 (各 有) 的 
可 测 变 换 . 

2* 在 在 Bo 上 的 o- 有 限 调度 思 臻 

v(B) -0 坟 >v(B9) 一 0, 对 任何 GE， 
{这 里 可 为 上 在 上 的 导出 变换 群 ,而 B9 了 解 为 人 918: 加 七 BB},》 


则 任 一 在 群 对 之 下 的 几乎 十 变 检验 必 对 等 于 一 不 变 检 验 ， 

证 . 记 妈 = 人 人 用: 由 (gw) 于 四 (9)}。 根据 假定 ，$(9%) 为 
沼 zx ge 可 测 , 于 是 用 忆 绍 wxX 乡 g， 由 于 中 为 几乎 不 变 检 验 ， 对 
任何 gEG, 站 的 gg 切口 ( 即 和 集合 {zs:，(%, 9) EMU}) 都 是 展 于 
诸 # 的 jr 零 测 集 , 根据 Fubini 定理 ， 有 (4xv) (MM) =0。 因 此 存 
在 /- 零 测 集 碎 , 致 由 0) 一 和 (2) (8. e 9) 当 szEN。 由 vv 的 0 有 
” 限 性 , 不 失 普 遍 性 可 假 定 ”为 概率 测度 定义 


人 一 | yao)arG)， 
A={%w, g(2) — bor) Ca. e. 9)}. 
显然 , 4 一 人: | 19(0) 一 $ (gr) lado (9) -9 由 此 知 4ESm。 现 
在 令 


以 及 集 


&(o， 当 sE4 
Vw) = -{6 we 
当 wEN 时 , P(g0) = (a. 9. p), 喜 g (8%) =$(8), zwEA, 因而 
中 (0) 一 中 (ww) 当 wEEN.。 所 以 ， 要 证 中 对 等 于 一 不 变 检 验 ， 只 各 
证 出 为 不 变 检验 .我们 先 指出 , 若 能 证 明 4 为 群 人 下 的 不 变 集 ( 邯 
4Y4= 4 对 任何 9E 的 ， 则 目 为 不 变 检 验 ， 实际 上 ， 对 任何 几 车 
zE4， 则 gz 所 4， 因而 由 (四) 一 上 (92) 一 9， 车 2E4 则 经 册 因 
而 间 (o0 一 下 人 9 的 等 价 于 go) 一 gm .由 于 wwE4, gzE4 由 go) 
及 4 的 定义 , 知 存在 妨 堆 调集 Bi 和 五 ， 致 
gm hn), 当 有 EBa 
9m) =p (hg), BhEB,. 
故 对 三 何 XEBUCBsg )， 有 8 人 = 区 (po) ~g(gw)、 依 假定 
"Bay ) 一 0( 因 (sa 一 0), 故 *(BUBog )=0 因此 这 样 的 
hh 必 存 在 , 这 证 明了 gC9z) 一 g(w)， 因而 由 (gw) = 由 (四 . 
为 了 证 明 妇 为 不 变 集 , 任 取 wzE4 及 gEQG， 由 wEA4 知 四 (38) 
一 gn) 对 9EB,v(B)=0， 帮 (99m) =g(wm) 对 9EBy!， 而 由 
假定 知 (DB9 3 一 0 这 证 明了 gz 有 4 即 和 女 的 不 变性 ,定理 证 毕 . 
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关于 此 定理 的 条 件 ,一 般 到 - 肖 玉 ,而 对 为 一 依 球 于 有 限 个 实 
参数 的 群 , 故 G 可 视 为 Be 人 中 及 时 分 别 为 了 和 了 本 的 Borel 子 
集 的 情况 完全 无 异 ) ， 这 时 一 般 取 腔 。 一 军 .，S 妥 一 罗 -， 若 和 为 
这 m+ 个 变量 的 取 值 于 本 的 多 -可 测 函 教 , 则 定理 的 条 件 工 
成 立 ， 全 3.4.5 3.4.9 都 属于 这 种 情况 条件 2° 一 般 不 难 直 接 
验证 ， 

例 3.4.10. 拿 例 3.4.5 中 的 变换 群 而 言 , 有 

好 一 Te:0>> 针 
在 父 上 定义 测 谋 > 如 下 : 对 晶 中 的 区 间 fa, 引 ， 
令 v Ce, DY) = ogb— logo, 
然后 将 其 扩张 至 缩 o， 这 显然 是 一 个 we- 有限 测度 ， 且 不 难 刹 出 对 
任何 BE 妇 Bo 及 gEG, 有 v(Bg) =v(B), 因为 这 关系 式 对 形 如 
tx, 夏 的 旦 成 立 ， 对 这 个 y, 条 件 2° 显然 满足 。 这 里 作出 的 测 
度 ”满足 条 件 >(B9) 一 +z(B), 因而 称 为 是 群 上 的 “ 右 不 变 测度 ” 
(Right Invariant Measure) 在 Haar 测度 的 理论 中 ， 证 明了 对 很 
广 的 一 类 群 ， 右 不 变 测度 " 的 存在 性 。 这 种 » 当 挫 满足 条 件 2". 
衣 本 例 而 言 , 在 如 上 取 通 常 的 工 测度 当然 也 可 满足 要 求 . 

与 UMPI 检验 类 似 ， 可 以 定义 一 致 最 优 的 几乎 不 变 检 验 《 简 
称 UMPAI 检验 )， 即 在 一 切 水 平 为 前 几乎 不 变 检验 中 ， 其 项 交 
函数 在 对 立 侧 设 集合 上 处 处 达到 最 大 的 检验 .由 定理 3.4.1 不 难 
得 到 下 列 的 定理 ， 
定理 名 .4,2、 设 检验 问题 (3.4. 力 在 群 人 下 不 变 ， 且 和 定理 
3.4.1 的 条 件 成 立 , 则 车 由 为 (3.4. 了 DD 的 水 平 a 的 UMPI 检验 时 ， 
它 也 是 (8.4,1) 的 水 平 & 的 UMPAI 检验 . 

证 . 任 取 一 水 平 的 几乎 不 变 检 验 办， 出 定理 3.4.1 知 ， 四 
对 等 于 一 不 变 检验 点 因此 

BO) = 有 (人 对 性 何 8E0, : 
因此 由 为 水 平 # 的 不 变 检 和 验 ， 但 由 为 水 平 < 的 UMETI 检 验 ， 克 
B,D 所 B,( 罗 对 任何 98EBzr， 因 市 

B00) 所 BO), 对 性 何 9EGr. 


-Hl 


由 于 内 是 任 一 水 平 x 的 几乎 不 变 检 验 ， 知 由 为 水 平 < 的 UMPAI 
签 验 . 定理 证 毕 . 

在 引 理 3.4.1 中 我 们 指出 : 任 一 不 变 检 验 的 功效 函数 只 依赖 
于 百 的 极 大 不 变量 v{ 四 .不 难看 出 这 个 事实 对 任 一 几乎 不 变 检 验 
也 成 立 ( 事 实 上 , 引 浊 3.4.1 的 证 明 逐 步 有 效 ); 可 以 举例 证 明 这 事 
实 之 道 一 般 不 真 , 然而 , 有 如 下 的 结果 : . 

引 理 3.4.4， 设 定 为 {( 侣 , 涩 ,Pe),8E 和 的 一 有 界 完全 统计 
量 , 了 的 导出 分 布 族 为 《P93, 0E 鸭 ， 在 这 分 布 族 之 下 考虑 检验 阿 
题 (3.4. 了 车 避 为 了 的 样本 空间 上 的 一 变换 群 ,而 问题 (3.4.1) 在 
此 变换 群 G 之 下 不 变 ， 则 如 检验 Bp(D 的 功效 函数 只 依赖 于 名 的 
极 大 不 变量 (的 ,由 必 为 一 个 群 从 之 下 的 几乎 不 变 检验 ， 

证 ， 对 一 切 6EB 有 Bt90)=B,(8), 即 

En[t (T= Belg (TT)], 
但 如 we [$ (TD)1 一 Be[$ (9T)], 故 得 
Eolp lgT) — 示 (DD) =— Els tg)] — Eotfgp 7)] 一 0 

对 一 切 8E8B。， 由 了 的 有 界 完全 性 及 0<$&1, 知 $9T) 一 和 (7 
(a- 9. 0) (此 处 ~ 《PE 8E), 此 处 pr 为 应 的 导出 测度 ， 而 
(Po 8E 押 一 有 证 毕 . . 

现在 设 变 景 五 的 分 布 族 为 长 呈 ， 角 ws， PaDE6, 当 内 由 
时 Po 天 了 Po 且 存 在 妥 * 上 的 co- 有限 测度 忆 致 (Po 6EB) ~ 以 . 设 
了 为 此 分 布 族 之 一 有 界 完全 充分 统计 量 。 由 于 了 的 充分 性 , 史 的 
导出 分 布 族 {4Z ， 罗 vv，PDD，9EgB 满足 施加 在 【( 党 ， 呈 。，Po)， 
8E8} 土 的 上 述 两 个 条 件 , . 

设 侣 为 由 一 些 由 党 到 用 上 的 一 一 变换 构成 的 一 个 群 ， 检验 
问题 (8.4. 力 在 此 灼 之 下 不 变 。 设 日 满 足 条 件 ， 对 任何 gEG, 有 
T(FD =T(IY) ST gm) ~=T (gn). 

于 是 工 (ge) 为 了 (2) 的 函数 ， 人 gw = 为 好 人) 我 们 假定 ， 对 
羽 何 9EG 加 为 到 用 上 的 一 一 变换 { 即 ， 变 换 t 一 如 介 构成 
了 到 了 上 的 一 一 变换 )。 这 时 ， 一 切入 的 全 体 互 = Ti: gEG} 
构成 一 个 了 到 了 上 的 一 一 变换 群 ， 不 难看 出 , 这 两 个 变换 群 9 
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和 如 在 台 上 所 导出 的 变换 群 妇 是 一 致 的 ， 以 例 记 G 的 极 大 
不 变量 ， 又 假定 , 变换 群 五 满足 定理 8.4,1 的 到. -条件 。 在 这 些 
条 件 下 成 立 如 下 的 重要 定理 . 

定理 3.4.3， 如 果 在 分 布 族 {( 多 ,多 zs，PD, 9EB} 之 下 ， 检 
验 问题 (3. 和 .了 ) 前 水 平 a 的 (在 群 吾 下 的 ) UMDEI 检 验 由 CD 存 
在 , 则 由 四 一 由 (0) 是 在 分 布 族 {( 训 , 玫 sw， Pe)，0 E96} 之 下 ， 
检验 问题 (3.4.1) 的 水 平 & 的 在 群 昌 下 的 ， UMPI 检验 ， 更 进 一 
步 , 在 一 切 水 平 a 的 ,其 功效 医 数 只 依赖 于 9 (及 的 检验 办 (wm) 的 
类 中 ,检验 tm) 也 是 UME 的, 

证 . 有 显然， 前 一 绪论 包括 在 后 一 铺 论 之 内 。 故 设 和 人) 为 
(3.4.1) 的 性 一 水 平 & 窒 验 ， 其 功效 函数 8,, 只 依赖 于 4( 鸭 。 由 
于 了 的 充分 性 ， 可 定义 厚 人 一 如 [和 (| 阅 且 可 使 灿 渍 足 . 
和 和 四 (全 ) 1 即 由 为 检验 西数 .显然 

Both TX)) = Eslb (A)], 

砂 检 验 灿 (了 (w)) 的 功效 函数 也 只 依赖 于 w( 办 ， 由 定理 的 慨 定 及 
引 理 3.4.4 知 , 由 (77 为 在 分 布 族 TCF 多 5s, PP), 68E6B} 之 下 ， 
《3.4. 了 的 在 群 瑟 之 下 的 一 个 水 平 8 的 几乎 不 变 检 验 , 然而 , 根据 
定理 3.4.3 及 本 定理 假定 , 并) 是 一 致 最 优 的 几乎 不 亚 检验 , 放 
有 

Eh TD) ETT, 任何 OE Bx, 
即 Bo [ph (og) 宝 吾 [由 (0)]， 对 任何 中 Ex. 
由 办 的 尾 意 性 ,定理 的 结论 证 明子 . 

上 带 助 于 这 个 定理 ， 可 以 补足 在 上 段 末 尾 处 所 到 的 ， 例 3.4.5 
一 3.4.9 中 论证 不 足 之 处 ， 实际 上 ， 这 几 个 例子 中 涉及 的 充分 
统计 量 都 是 完全 的 ， 且 不 难看 出 , 定理 3.4.3 的 条 件 全 部 成 立 ( 关 
于 例 3.4,5, 已 在 例 3.4.10 中 验证 了 . 其 它 各 例 留 给 读 老 )， 因 
此 , 在 那些 例 中 求 出 的 , 依赖 于 充分 统计 量 的 UMPI 检验 , 也 是 在 
原 分 布 族 干 朵 一 检验 问题 的 UMPI 检验 ， 更 进一步 , 在 例 3,4.5 
中 , 所 求 出 的 UMEFI 检验 在 一 切 其 功效 函数 只 依赖 于 s/o 的 检验 
类 中 ,也 是 UMP 的 .. 其 它 各 例 也 有 类 似 的 结论 . 


在 第 五 章 中 , 我 们 将 和 用 定理 3.4.3 证 明 著 名 的 许 宝 台 定理 . 


(四 )UMPU 检验 与 UMPI 检验 的 关系 


在 前 面 几 个 例子 中 ， 我 们 见 到 UMPU 检验 重合 于 UMPI 检 
验 的 情况 ， 这 里 证 明 一 个 一 般 性 的 结果 . 

定理 3.4. 有 4， 设 检验 问题 (3.4. 才 存在 着 水 平 a 的 UMPU 检 
验 多 且 是 唯一 的 。 又 设 这 检验 问题 在 某 变换 群 日 之 下 不 变 ， 且 
存在 着 水 平 a 的 UMPAI 检验 四 , 则 后 者 也 唯一 且 名 与 姑 重 合 
( 即 a. Be. 相 每 ). 

证 . 以 这 四 记 该 检验 问题 的 一 切 水 平 x 的 无 偏 检验 的 集合 ， 
且 对 任何 检验 下 及 gEQG, 以 pg 记 检 验 范 获 由 (Go) 一 (gm), 则 易 
见 

$EUVO) OEUO. 
这 不 难 从 Be (四 一 B090) 及 检验 问题 在 灼 蝇 之 下 不 变 君 出 来 . 任 
取 gE 和 及 6EBr， 考 不 检验 Bg， 根据 上 述 , By EU(m), 是 因 池 
为 UMPU 检验 ,有 
Bn 0) = Bi GO — supB, GD = EBP Bw (0) 
= sup Bw (0) = P30). 

由 此 知 Wg 也 是 水 平 a 的 UMPU 检验 ， 由 泌 的 瞧 一 性 知 学 Cg 四 
一 名 人 (a. 8. )， 这 说 明 包 是 几乎 不 变 的 , 而 内 为 DMPUI 检验 ， 
喜 By 四 之 By(0) 对 任何 9EBr. 但 畴 ED (a)，. 此 因 基 站 (6) 二 mg 
划 汕 为 水 平 a 的 不 变 检 验 , 放 Bx 四 之 B00) =a， 当 90EBr, 这 说 
明 办 为 无 偏 的 因而 扩 EDC@), 故 加 也 为 UMPU 检验 ,于 是 由 
UMPU 检验 的 唯一 性 知 太一 (a. 6. )， 

”如 果 定 理 3.4.1 的 条 件 成 立 ， 到 UMPAI 检验 与 UMPI 检验 
一 致 ， 因 而 在 本 定理 中 :名 为 UMPAI 检 验 ” 可 疏 为 “中 "为 
UMPI 检验 ”, 这 就 解释 了 部 面 诸 例 中 , UMPU 检验 与 UMPI 检验 
重合 的 现象 ， 然而 ,这 定理 并 不 意味 着 从 其 中 一 个 的 在 在 性 可 推 
出 另 一 个 的 存在 性 。 我 们 前 已 指出 , 这 一 点 并 非 事实 . 


二 中 和 


§3.5. 拟 合 优 度 检验 


(一 ) 问题 的 提出 


设 了 ，…， 辽 ,为 随机 变量 了 的 19， 样本 , 要 检验 假设 
页 ; 蔗 的 分 布 为 也. (8.5.D) 
目下 为 简单 计 , 先 没 也 为 一 完全 已 知 的 分 布 ， 关 于 分 布 了 一般 
有 以 下 刀 种 情况 . 

例 3.5.1， 时常, 分 布 万 是 根据 某 项 学 说 , 理论 应 有 的 后 果 . 
这 时 ， 检 验 互 是 否 成 立 就 意味 着 对 访 学 说 和 理论 进行 实际 的 核 
验 。 比 方 说 , 某 人 在 制造 一 粒 骸 子 时 ,是 本 着力 求 均 匀 的 目标 去 做 
的 。 因 此 , 他 声称 在 这 散 子 投 据 时 ,出现 i 一 1,…, 6 各 点 的 概率 
都 是 于 这 时 ,检验 互 是 否 成 立 就 等 于 检验 他 是 各 真 做 出 了 一 粒 
完全 均匀 的 盘子 。 在 这 里 , 也 为 一 离散 分 布 ， 在 1，…, 6 各 点 分 
别 有 概 率 后 . z 

例 3.5.2. 有 时 , “ 工 的 分 布 为 7” 这 个 说 法 并 无 充足 的 理论 
根据 , 但 有 一 些 理由 认为 它 可 能 对 , 因此 提出 来 通过 实际 数据 检验 
一 下 , 以 作为 进一步 研究 的 张 本 。 例如, 某 厂 分 三 个 班 生产 , 在 要 
当 一 个 时 期 以 来 ,事故 较 多 。 人 们 对 事故 是 否 和 生产 更 次 有 关 感 
兴趣 ， 在 此 , 就 可 以 把 

互 ， 事故 率 与 生产 班次 无 关 
作为 一 个 假设 提出 来 ， 尽 管事 先 可 能 并 无 充分 再 由 认为 事故 束 确 
与 班次 有 关 , 但 也 没有 理论 上 的 充足 根据 认为 互 一 定 成 立 。 因 此 ， 
提出 这 个 假设 只 是 作为 研究 整个 问题 的 第 一 步 ， 从 数学 上 说 , 它 
相当 于 检验 一 个 变 重 卫 的 分 布 为 ,也 在 1, 2% 8 这 三 个 点 各 有 
概率 避 、 

鲍 3.5.3， 有 时 ,人 们 有 很 大 的 理由 相信 互 不 对 , 但 为 了 得 到 
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更 确实 的 证 括 , 并 说 服 对 此 持 怀疑 态度 的 人 , 也 可 以 把 吾 作 为 一 个 . 
假设 提出 来 . 例如 , 某 城 市 从 上 午 8 时 到 下 午 8 时 这 一 段 , 以 一 小 
时 为 单位 的 车 宰 发 生 率 . 由 于 一 些 显然 的 理由 , 可 以 相信 这 发 生 
率 在 各 小 时 内 不 会 一 样 。 然 而 ,我们 仍 可 提出 假设 


恕 ， 各 小 时 内 车 捅 率 粗 同 ， 


训 果 实际 数据 与 此 严重 不 符 , 则 可 以 否定 这 假 虽 , 而 这 正 是 我 们 的 
目的 . 从 数学 上 说 ， 这 相当 于 检验 一 个 变量 的 分 布 为 到 也 的 概 


率 集中 在 二 个 点 ,每 点 有 概率 坟 - 


检验 这 种 假设 的 总 的 思想 是 ， 设 法 提出 一 个 能 反 喘 实际 数据 
和 …* 卫 s 与 理论 分 布 了 的 偏 芝 的 量 让 下 4-…, 昼 s, 本 .如 果 4 
超过 某 个 界限 如 则 认为 理论 分 布 户 与 数据 mm，*…，%% 不 符 ， 因 
而 否定 五 。 热 而 ， 问 题 移 这 种 “ 非 此 即 彼 ”的 提 法 常 显得 有 点 率 
强 。， 因 为 草 论 和 实际 ， 一 般 说 来 没有 截然 的 符合 或 不符 合 ， 更 恰 
当 的 看 法 基 问 ， 实 际 数 据 与 理论 分 布 符 会 程度 如 何 ? 由 于 这 个 原 
因 , 通常 对 象 鸟 .5.1) 这 样 的 问题 , 我 们 不 以 “是” 或 “ 否 " 的 形式 来 
回答 ,而 是 提供 一 个 (如 于 和 1 之 向 的 ) 数 字 ， 作 为 符合 程度 的 数 
量 刻 划 , 这 种 数字 可 称 为 " 披 合 倪 度 "而 关于 人 .5.T 的 检验 常 称 
为 “ 氢 合 优 度 检 验 ”《Geoodmess of Fit Tes 具 .这 些 都 在 下 几 跨 中 和 仔 
网 讨论 . 

田 一 点 值得 一 提 的 是 (其 实 这 对 一 切 检 验 问题 都 对 ), 在 提出 
一 个 氮 合 优 度 时 ， 它 只 是 在 选 定 的 偏差 4A(m,…, ss， 本 及 样本 
大 小 之 下 的 拟 合 优 座 .在 ss 很 小 时 可 此 性 当然 较 差 .有 郧 一 方面 
也 要 注意 , 由 于 假设 43.5. 妃 笔 对 地 成 立 的 情况 几乎 是 没有 的 ， 当 
样本 大 小 m 很 大 时 ,只 要 理论 分 布 巾 有 不 合 , 就 会 有 严重 的 偏 闪 显 
示 出 来 ， 拿 例 3.5.1 说 ， 设 基 人 作 的 钥 子 ， 各 点 出 现 概率 分 别 为 
计 +109, Ed 2, 8 二 -10 54 饭 8， 这 应 当 说 是 “非常 
均匀 "了 . 但 如 把 这 盘子 投 摔 10” 次 , 则 实际 结果 将 与 “ 骨 子 均 勾 ” 
这 假设 有 严重 篇 蓉 ， 如 果 我 们 就 此 作出 猪 论说 “ 某 人 所 作 上 明子 与 


中 史 吕 和 


均匀 性 符合 很 差 ”， 则 未 必 是 公平 的 . 


(二 ) %*- 统 计量 的 极限 定理 与 x*- 检 验 


上 一 段 中 指出 ， 检 验 假设 (8.5.1) 的 第 一 步 是 村 提出 一 个 
能 反映 数据 z4,…, wm% 与 理论 分 布 也 的 偏 差 的 量 4，1900 年 
天 . Pearson 提出 了 一 个 这 样 的 量 并 证 明了 有 关 的 极限 定 刑 . 这 个 
基 就 是 著名 的 好 -统计 量 ， 基 于 这 个 统计 量 的 拟 合 优 度 检验 称 为 
22- 检 验 ， 

先 讨 论 互 只 取 有 了 跟 个 值 昌 好 完全 已 知 的 情况 ， 这 时 ， 研 的 梯 
本 空间 可 分 为 办 个 两 两 没有 公共 点 的 集 51,，…, 5 的 并 , 且 

P(EESD 一 Do t=1, , m, Pt, “pm 
都 已 知 ， 设 样本 为 瑟 ，…， 疏 。 令 
4 一 五 1，…， 于 中 莫 在 内 的 个 数 , 4 一 …， 和. 
愉 .- Pearson 提出 用 


Eom/np (3.5.2) 
作为 衡量 理论 分 布 {pi,…, pm) 与 实际 数据 的 偏差 ， 当 理论 分 布 
成 立时 , 依 大 数 定 律 有 了- 守 ps, 故 区 ,倾向 于 比较 小 ， 耕 虽 就 倾 
向 于 取 较 大 的 值 ，Pearson 证 明了 下 面 的 极限 定 理 ; 

定理 8.65.1. (区. Pearson). 当 于 的 理论 分 布 确 为 {pi yy Dn} 
时 有 
Es > 2 (3.5.3) 
我 们 把 定理 的 证 明 放 到 下 一 段 ， 现在 说 明 , 在 这 个 定理 的 基 
础 上 可 提出 (3.5.1) 的 一 个 答 验 获 如 下 ， 设 sm 足够 大 以 致 可 近似 
地 认为 ,的 分 布 就 是 砍 - 于 是 可 以 提出 检验 由 如 下 : 当 
KE, 0) (8.5.4) 
时 否定 及, 不 然 的 话 就 接受 豆 ， 由 定理 8.5.1 知 这 检验 的 渐 近 识 


实 水 平 为 m 即 
了 人 玫 xp (| 五 ) 一 m no 人 .5. 肋 


Te 


利用 这 个 极限 定理 也 可 以 所 出 一 个 氢 合 做 度 ， 方 法 如 下 ， 设 
就 基 一 组 具体 数据 算出 下, 之 值 为 o。 讨 算 概率 
Plm, oO = Pri im0), 
mye) 的 音义 是 ; 当 假 设 互 成 立 南 入 相当 大 时 ,偏差 五 。 取 不 小 于 。 
的 值 的 可 能 性 大 小 . 如 果 这 个 什 比较 大 ,例如 说 为 60%%, 那 就 是 说 ， 
即使 零 假 设 瑟 成立, 偏差 万, 大 到 象 6 这 个 大 小 或 更 大 的 机 会 仍 有 
十 中 取 六 ,因而 ,这 全 大 小 的 偏差 , 反 跌 试验 数据 与 理论 分 布 的 符合 
是 好 的 . 反 过 来 , 若 忆 (oo (比方 说 ) 为 功 %, 则 当 殖 成 立 而 nm 较 大 
时 ,偏差 五。 达到 " 或 更 大 的 机会 只 有 十 中 取 一 ,而 我 们 就 没有 理由 
认为 符合 程度 “尚好 ”了 .这样 , 可 以 把 这 个 概率 称 为 “所 合 优 度 ”, 
如 果 我 们 取 答 验 水 平 为 a 一 0.05, 则 表示 我 们 约定 当 拟 合 优 度 小 于 
0.05 时 , 就 认为 互 不 成 立 ， 和 由 于 六- 分布 是 一 个 中 间 隆 起 的 单 峰 
分 布 (自由 度 沁 3 时 ), 洪 型 的 符合 良好 的 情况 频 是 Pl,c) 在 (比方 说 ) 
0.8 一 0.7 左右 的 范围 内 . 卫 Cm, 6) 过 小 固然 反映 拟 合 不 佳 ,但 过 于 
接近 1 的 卫 (m, ce} 值 也 难免 使 人 对 数据 的 真实 性 产生 怀 尾 . 
现在 考 虚 玉 仍 取 有 限 个 值 ， 但 理论 分 布依 束 于 有 限 个 实 参 数 
的 情况 .这 时 于 的 样本 空间 多 分 解 为 mw 个 两 两 不 相交 的 集合 5 
"ey SB,,, 且 
PIXIESBD) Dm 大) 一 1 mm (8.5.06) 
这 里 9E6CBR， 因 此 , 候 设 互 的 内 容 是 
五 : 存在 某 个 6° E@, 至 P(XEBD 一 (ge 一 
(3.5.7) 
检验 这 假设 的 方法 与 的 分 布 完全 已 知 的 情况 相似 ， 我 们 先 通过 
样本 对 参数 作 一 估计 , 得 记 ( 并 2， ……， 开 然后 按 与 公式 (3.5.3 
类 似 的 公式 
,总 [rm — nm (6) J /rms (By, (3.5.8) 


Nisher 将 Peareon 定理 推广 到 这 个 情况 ， 得 到 下 油 的 重要 定理 
定理 3.5.，(R. 丸 ,Fisher,1924). 设 (8.5. 候 成立, 如 为 日 的 
内 点 又 mx(9) 满足 定理 2.6.7 的 三 个 条 件 , 商 入 为 似 然 方程 组 


二 DB * 


Te 


SB pm 的 -0 1 8.5.9 
训 元 馈 20 0, 了 (3.5. 


之 一 相合 解 ( 即 记 为 g 之 相合 信 计 )， 此 处 和 = 而 吧 罚 


王 2 中 薪 在 吕 内 的 个 数 , 则 当 %n->oo 时， 起 ， ar 

定理 的 证 明 放 在 下 一 竖 . 此 定理 用 于 检验 互 及 计算 拟 舍 优 订 
之 方法 , 与 定理 8.5.1 完全 相同 . 

当 理 论 分 布 不 集中 在 有 限 个 点 上 时 , 一 般 作 法 是 将 其 离散 化 . 
即将 下 的 祥 本 空间 澡 适当 地 分 成 mw 个 两 两 不 相交 的 集合 Bf 
Sm, 算出 

了 (到 ESD -Dn 或 m0 , t=1,.…, m, 
从 而 转化 到 已 讨论 过 的 情况 。 当然 ， 这 里 难免 要 牺 性 一 些 细节 . 
因为 , 分 布 在 每 个 &f 内 的 差异 就 无 法 反映 了 .， 当 mw 取得 较 大 时 细 
节 保 留 得 多 一 些 , 但 落 在 每 个 以 内 的 数据 个 数 沽 少 , 因而 食 。 的 真 
确 分 布 与 其 极限 分 布 避 _x-1 的 距离 加 大 .在 选取 和 时 要 考虑 到 这 
两 方面 的 因 尼 . 

在 定理 3.5.2 中 , 六 只 要 是 (3.5. 引 的 任 一 相合 解 就 行 ， 一 
裔 可 取 后 为 8 的 极 大 似 然 估计 . 

下 面 考察 几 个 例子 ， 

例 8.5.4,， 根据 遗传 学 弄 论 ， 人 类 血型 由 一 基因 位 点 上 的 三 
个 等 位 基因 A, B, 0 所 决定 ， 这 三 个 等 位 基因 产生 六 个 基因 型 
DO, A0, AA, BB, BO AB， 它 们 产生 四 未 表现 型 ， 

OQ0 一 一 血型 O，AA, AD 一 备 弄 A, 
BB, BO 一 一 血 弄 了 和 B 一 一 血型 AB. 
设 A, B, O 三 个 要 因 在 所 考察 的 人 类 群体 中 的 频率 分 别 为 p,g 
及 7 一 1 一 p 一 9， 如 果 群 体 足够 大 而 交配 是 随机 的 ， 则 根据 遗传 学 
中 的 Hardy-Weinberg 平衡 定律 , 四 种 血型 的 频率 ( 娄 率 ) 应 分 别 
为 
P(O}=7’, P(A) ~ 12 pr, POB) 
29gr, P(AB) =2Pg. (3.5.10) 
这 相当 于 m==4, b=2 的 情况 。 如 果 我 们 考察 了 四 个 人 ， 发 现 0， 


二 有 99， 


a 


态 ，B,， AB 血型 的 人 分 别 有 wo， 04; Rs, ?aa 个 , 则 为 俏 计 2，9，m 
应 在 条 忻 2 十 9 十 7 一 1 之 下 求 

L(p, g, 7) = "p+ 2pr) "T2077) 2p9) 全 
之 极 大 慎 点 ， 这 各 要 信用 入 人 


四; 加 0 十 入 十 名 
Pf, Ly 寺中 0 4 ， -1 一 入 
为 初始 点 ， 得 出 p,q ;之 估计 全 9, 了 后 ,计算 
全, 二 Cd + (na— nD + OP 
和 2 nt oArY 
一 (多 +207) 了 Cean 一 2n80) 2 
n+ 297) 2npg 
依 定 理 3.5.23， 当 零 假 设 成 立 ( 即 血型 确 是 按 人 .5.10) 的 方式 分 布 - 
的 7 时， 太一 好 -sr 一 好 ， 由 此 可 计算 拟 合 居 谋 ， 分 布 人 .5.10) 在 
许多 人 类 群体 中 作 过 检验 , 符合 程度 都 很 好 ， 
例 3.5.56， 要 检验 的 是 一 组 数据 全 1,…, 卫 , 蚌 和 否 能 符合 
”Poisson 分 布 ， 把 样本 空间 {0, 1, 2, -…} 分 为 四 部 分 ; 
Bi = {0, 1 在] Sa 和 = 人 {十 1 十， 


So a—{ tl pa A 3 4 十 了 小 
记 名 人 一 eA 一 0，1， 3，-… 以 政 
OEP A OEP GA 
则 得 似 然 方程 为 


D/O:0) -0. (3.5.11) 
此 方程 之 解 也 需 用 迁 代 法 一 般 , 考虑 到 入 就 是 总 体 均值 , 往往 用 
检 本 均值 如 二 禄 工 ,去 估计 它 (注意 总 是 》 的 极 大 似 然 估计 ). 


于 当然 不 与 (3.5.11) 揭 解 完全 一 致 。 如 我 们 在 后 面 将 指出 移 ， 以 
至 代 (8.5.11) 的 解 使 候 , 的 极限 分 布 受到 影响 . 

例 3.5.6. 设 机 检验 一 组 样本 是否 从 一 正 态 总 体 中 抽 来 . 将 
《一 ee so) 分 为 包 个 区 间 ， 


= DoO0 = 


一 【 一 oo， 01), Ss = [ea， Co) ， ey Hm-1 
= [Gm_ 2, Tm) Bm = [Gm 00), (3.5.12) 
则 本 区 全 mi 
2 
以 之 代入 (GB3.5. 外 ,可 列 出 为 天 定 &%, o 的 方程 组 , 此 方程 组 之 解 也 
只 能 用 数值 方法 求 得 ， 得 出 % c 的 估计 名 3 后 ,由 (3.5. 鸭 算出 
依 。， 然 后 根据 定理 3.5.2 当 零 假设 成 立 而 wm 很 大 时 ， 应 有 将 ~ 
和 9_1 一 Xa， 这 可 用 来 计算 氢 合 优 度 . 
在 本 例 中 , 与 上 例 一 样 , 由 于 求解 但 .5. 人 不易 ,通常 就 用 (wm 
0 的 极 天 似 然 估计 ( 指 通 常 的 极 大 似 然 估计 , 而 非 按 (3,5.12) 分 组 


后 的 极 大 似 然 信 计 ) (于 二 寥 (和 一 忆 引 或 以 二 了 癌 ( 工 一 Z 


名 一 1 


代替 于 高 ( 工 ,一 闷 )? 也 无 关 宏 由， 然而 ， 由 于 它 已 不 是 (3.5.9) 


的 解 , 定理 3.5.2 关于 全 ,的 极限 分 布 的 论断 就 不 再 成 立 . 由 于 这 
个 重要 问题 在 一 般 统计 书籍 中 多 不 担 及 ， 因 此 我 们 利用 这 个 机 会 
作 一 简要 的 介绍 , 其 证 明 超 出 本 书 范围 之 外 . 

假定 互 的 理论 分 布 为 {f(z, 外 5，8 一 (和,，…, 名) E61} ,将 
样本 空间 绍 分 为 tw 个 集训 ,…, 8。, 按 前 面 的 方法 处 理 ， 由 
(8.5.9) 解 出 所 , 代入 (3.5.8)。， 这 时 , 息 , 当 % 一 00 时 有 极限 分 
布 妃 -:-1， 邵 时 用 8 的 不 分 组 的 极 大 似 然 估 计 

《 即 og Ks D0 jl, …, WD) 


j=1 B60 

fr 代入 (3.5.8)， 所 得 结果 记 为 五 *，Chbamof 和 Lebhmanmn 在 1954 
年 证 明了 ， 当 和 ~ co 时 ， 

开工。 了 十 NaP3 十 .十 NAP2， (8.5.18) 
.65,1 右边 各 项 独立 ，Y 了 ox yp- 了 一 和 OO, DD，l1<tck 
和 为 方程 (未 知 数 为 入 

i- dDil=0 

之 根 ,其 中 字 = (Do) vers 了 一 (了 mm)sxny 而 
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0 0 
al 三 ,人骨 a1 于， 
1, [218 E02logf CE, 0 


由 于 > 与 不同, ja …, 和 不 全 为 0 因而 极限 分 布 与 如 -sw-1 有 
差距 

上 述 铺 果 的 不 便 之 处 在 于 ju，…, 而 参数 真 值 8 有关 , 因此 
无 法 用 以 决定 一 个 检验 界限 ，Watgon 在 1957 年 引进 记 调 “事后 
固定 概率 区 间 ”, 即 先 给 定 pu>0,6~1…, m, 高 Pr 一 1 在 由 样本 
于,,，…， 卫 ,得 出 8 的 极 大 似 然 估计 所 后 , 定 出 点 及 … 为 1 烧 

.J fl, pi-a fl, 的 ma 
-go 人 Fe O°) dm ~pe. 

然后 以 仙 点 为 将 《一 oo，90) 分 为 名 本 区 间 剖 一 (一 ec， 
2 ， Ss= C2 2 区] ， Sa = (Zn_1, o0), 再 按 公 式 (3.5.8 算 站。 
当 上 为 正 态 审 度 时 ，Wateon 证 明了 与 人 3.5.13) 一 样 的 结果 , 其 中 
天 一 2 且 )u )a 与 正 态 分 布 克 人 o9 中 的 参数 四 0 无关， 当 上 述 
区 间 的 位 置 对 称 地 排列 在 有 的 两 出 时 , 他 求 出 了 》，) 的 明显 公 
式 。 例如 , 对 四 个 区 间 的 情况 ， 有 入 一 0.189, hs 一 0.619， 这 了 时， 
若 m%=10, 则 名 义 上 的 极限 水 平 0.05, 实际 上 为 0.054， 虽 不 全 
相同 ， 相 去 亦 不 其 远 , 这 似乎 障 示 我 们 ， 在 用 对 -法 检验 正 态 分 布 
时 , 使 区 间 对 称 地 排列 在 了 的 两 俩 是 可 取 的 .在 1967 年 ，Watson 
又 将 关于 正 访 分布 的 结果 推广 到 一 般 分 布 的 情况 . 

又 , 在 理论 分 布 完全 已 知 时 ，Mann 和 Wald 曾 指出 ， 在 分 区 
间 时 , 使 各 区 间 有 相同 的 概率 是 有 利 的 . 


(三 ) 极 艘 定理 的 证 明 


本 段 的 且 的 是 证 明定 理 3.5.1 和 3.5.2. 先 证 明 下 面 的 引 理 ; 
引 理 3.5.1， 设 (Zw …， 下 we) 服从 多 项 分 布 M (Gn, ri …， 


| 


1 aD On 
Jo 名 去 


一 (二 天 "oe, mw — Tm ) ， 名 一 于 2 he 
nr Pm 
$= Vr NV men) 
而 妃 为 % 阶 常数 方 阵 ， 则 如 CI 一 人 且 存 在 a 致 C 一 oF 时, 对 天 


个 s 有 了 CY -二 > 成 且 s-rk(C) 当 a-0; sa~rk(0) 一 1 当 
cx0 (rk(C) 指 C 的 秩 ) 

证 ， 取 mx (m 一 力作 阵 4 致 (pi4) 为 m 阶 正 交 方 阵 ， 注意 
由 了 一 0, 车 记 环 二 第 于 则 有 


0 中 
(2.)-(%) 
因而 下 ,= 有 人 才 CF 了 .=2ZiA'CAZH， 然而 根据 引 理 
2.6.7, 2° 及 引 理 2.6.8 易 见 
ZN TI, ), 当 n oo. 
于 是 了 HCY, 一 > 加 (4'CA)Z, 其 中 ZN (CO, J 4). 放 依 §1.1 
(三 ), 籽 分 布 性 质 g， 知 
CA)Z~ 必 以 CA 为 守 等 且 秩 为 生 ， 
注意 到 十 和 4' 一 J， 全 4C4 符 等 的 充分 必要 条 件 为 
CC 一 是 DC4-4Cd， 
注意 到 4 上 一 0, 知 当 C2 一 C 且 C 一 地 时 上 式 成 立 , 故 了 CY, 
之 极限 分 布 为 妇 分 布 ， 其 自由 度 为 s=wrk(4C4)、 但 由 上 4 
一 0， 知 
/ ， vwCp 0 
PEO = rk [8 ceis|-"r( ca) 
rklA'CAY, Cy—0, 
-| i+rb(A' CAY， CS. 
这 证 明了 所 要 结果 . 
现在 证 明定 理 3.5.1. 用 下 理 8.5.1 的 记号 , 有 
,= 于 了 
此 相当 于 引 理 8.5.1 中 C= 了 的 情况 ， 屁 然 C?= 避 而 CF 一 内 


+*0， 放 区 ,一 > 避 ， 其 中 一 rh(C) -1-m-L 这 证 明了 定理 
3.5.1. 
定理 3.5.2 的 证 明 。 
设备 ( 玉 1,，，， 陡 ,)》 为 方程 (8.5.99) 的 (8 的 ) 相 合 解 . 参数 真 信 
为 多 = ( 鸭 ,… ' 记 条 == 而 全 Dm 一 (中 ,以 及 
列 ( 全 = 有 一 
以 一 (工人 二 0 ， 
_ 1 wi(0) 
一 CB say 其 中 一 0 gy 
D=Vn 0 =- (Vs ba 0), a", Mn Bs— 6)', 
(a oe rm re) 
朵 a 了 AAA » 
i Fm 为 ZX wi ns 中 落 在 Ai， Sn 中 之 个 数 ， 
元 = B' YY, 
记忆 B= 下 .在 定理 3.6.7 的 证 明 过 程 中 我 们 曾 得 出 (加 (2.6.63) 
式 , TD 一 B'B 见 $2.6 219 页 脚注 ). 


万 .一 一 J- mF-1B' Y.. (3.5.14) 
由 于 人 不 为 8 的 相合 居 计 , 多 为 日 的 内 点 及 wi( 办 有 一 阶 连 续 偏 
导数 , 易 见 
~ (光一 m1) 


,mh 


这 可 写 为 全 一 一 如 D。， 由 (3.5.14) 得 一 BF-+B' 了, 所 
以 
也 一 下 ,一 一 (I,— BF-BNY,. 
回 到 们 .5.9) ,得 
=|. Ul PI BF-+B)'(,— BF-:B) Y, 
一 和 (有 一 下 太一 五 也 一 了 了 
有 C=0, 又 因 再 昌 一 0 人 一 《vV 击 ,wwVR 门 ， 知 人 = 几 故 
由 引 理 3.5.1 馈 
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请。 二 > 好， 当 m-> oo. 

其 中 s=7r£(CO) 一 1， 因 为 CC 是 短 等 阵 , 其 牧 等 于 其 迹 (traoe), 故 
rEO i Oi BF -mir (BE B) 
“mi (FB DB ~m—ir =m—b, 

放 8=m 一 5 一 4， 定理 3.5.2 证 瞩 ， 


(四 ) 单独 一 组 的 偏差 的 检验 


基于 友 。 的 检验 给 出 一 个 全 夯 的 符合 强度 的 检验 . 有 时 , 当 整 
个 符合 程度 不 好 时 ， 我 们 怀疑 这 主要 可 能 是 由 于 某 一 个 组 的 符合 
程 庶 特 别 差 所 导致 的 , 而 该 特定 组 所 以 符合 很 差 , 则 可 能 是 由 于 某 
种 特定 的 原因 而 不 一 定 是 由 于 原 米 的 理论 分 布 不 对 。 为 了 漠 清楚 
这 一 点 , 需要 一 个 关于 单独 一 组 的 偏差 的 检验 . 

设 定理 8.5,.3 的 条 件 成 立 ,， 且 前 面 的 记号 都 保持 ， 设 我 们 对 
第 了 组 ( 即 集合 8 的 偏差 感 兴趣 。 有 自 热 地 , 提出 统计 量 

= [mi 一 nor 人 到)]/w re CB), 

当 wy 很 大 .很 小 或 |7y| 很 大 时 , 可 以 判 浙 第 了 组 的 偏差 确实 超过 了 
理论 所 容许 的 程度 ， 其 体 的 检验 界限 基于 下 面 的 定理 , 其 证 明 不 难 
由 定理 8.5.2 的 证 明和 衬 出 , 

定理 3.5.3， 设 定理 3.5.2 的 条 件 成 立 , 则 


rob 下 », 
其 中 中 的 -1 的 - 胃 让 二 训 方 


op 


而 天 ab 为 方 阵 五 的 (r， 相 元 , 了 一 B' BB， B= (Br) nx 其 中 


1 rs 
B= DD 
wm 0 


证 、 由 于 高 为 8 的 相合 估计 且 xry(0) 连续 , 有 
及 一 一 [一 ni BY /ne Ot, 
此 处 娘 为 理论 分 布 中 的 参数 真 什 ， 但 


[ey 一 /VT = (了 .一 Dw) 的 第 了 元 
(一 BF-1B'iw) 了 , 的 第 了 元 ， 
但 是 (1 — BEF-B'|) TY —> NO0, (V), 
其 中 (注意 B'iowp 一 0) 
V= (a BF2B' | (Tah) (a BF B'|.) 

= —J'— BEB'|» 
其 (3, 分 元 姑 为 中 (6) ， 这 证 明了 |oy(99) 一 > 育才， 由 于 
oy(0) 为 6 的 连续 函数 , 所 为 9 的 相合 估 计 旦 参数 真 值 为 甸 有 


ror 仿 ) 一 一 ri/ey(bm， 这 还 明了 所 要 的 结果 . 


五) 独立 性 的 检验 

问题 的 理论 模型 是 : 设 随 机 向 量 ( 卫 , 了 ), 卫 可 能 取 的 值 是 1， 
2,…; 二 了 可 能 取 的 值 是 1,…, J， 现 在 对 ( 开 , 了 ) 进 行 了 次 
独立 观察 , 发 现 “ 耳 取 i 了 取 闻 的 次 数 为 zw， 村 据 此 检验 

五 : 不 ,了 独立 

这 个 假设 , .~\ 

在 这 种 问题 中 ， 常 把 数据 排列 为 
右 表 的 形状 ， 它 称 为 列 联赛 (Contin- | 


Eonoy Table) 。 在 此 表 中 , 由 = 次 ae: 

J 
而 ~ 这 nw. 
记 P(X- PF=) -py P(T~D =p., P(Y -HN) -py. 


如 果 独 立 性 成 立 , 期 应 对 一 切记 和 了 有 pu 一 和 re2.f， 这 相当 于 定理 
3.5.2 中 m=1J, 而 大 一 并 + 一 2 的 情况 ， 记 


下 + 
LL- (ppp™, 
log 了 _0 ol ,.. 1_1 
Bp. 全 本 Ea 用 Ed 


Og 1, .J 
py +: F 3 1, 


作 方 程 组 | 


县 在 求 导 时 注 章 91. 一 1 一 号 pe 和 py-1 -各 pe 得 


Wl/ Dr, = Wy. Pr d=—1, **, 1—1 

NPR/ps 1, ,Tl1, 
由 此 解 出 
DL = Nt, ol1, ,Ts Dj = ?=1, “J 
代入 (83.5.8), 得 


2 Cy mms/ 3 /me 


和 
=“( 注 宫 让 一- (3.5.15) 
定理 3.5.2 的 条 件 在 此 显然 满足 所 以 在 互 成 立时 , 当 m 一 co, 有 
食 。- 二 > 22， 其 中 
一 以 一 此 一 芋 一 了 7 一 (7T 十 一 分 一 在 一 全 一 二 (7 一 六 
因此 可 以 取 {信之 x%-pw_pn 四】 为 特定 域 ， 当 很 大 时 这 检验 的 
真实 水 平 接近 wx. 

这 种 问题 在 应 用 上 碰 到 很 多 ， 大 都 采取 这 样 的 形式 ， 在 同一 
个 体 上 测定 两 项 指标 耳 , 了 7， 要 检验 这 两 项 指标 是 否 有 关 . 比方 
说 吸烟 与 得 肺 痛 的 关系 ， 在 同一 个 人 身上 ， 一 个 指标 是 “吸烟 与 
否 ”, 取 两 个 秆 ; 一 个 指标 是 “得 肺癌 与 否 ”, 也 取 两 个 值 , 这 样 得 到 
一 个 2x2 列 联 者 , 由 之 可 检验 “吸烟 与 得 肺癌 是 否 有 关 ” 的 问题 . 
也 可 以 将 第 一 个 指标 再 细 分 ， 例 如 分 为 “不 吸 ” “每 日 十 支 以 下 ”， 
“每 日 0 一 20 支 ", “每 日 20 支 以 上 >” 等 四 个 等 级 , 这 样 第 一 指标 有 
四 个 值 , 而 得 到 一 个 4x2 列 联 表 ,， 由 之 可 对 吸烟 与 得 肺癌 的 关系 
进行 进一步 的 考察 . 

在 I~2, J 一 2 的 场合 , 得 到 2x2 列 联 表 , 也 常 称 为 “四 格 表 ” 
(Fourfold Table) 是 应 用 最 广 的 一 种 情况 , 这 时 下 ,的 公式 化 为 

他) Ca .fs) » 
自由 度 为 名 一 名 一 了 =1. 在 这 个 场合 , 当 s 较 小 时 ,为 了 使 真确 
分 布 与 极限 分 布 性 更 接近 , 不 少 作者 设计 了 一 些 将 四 格 示 进行 调 
* B07 
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整 的 作法 ， 对 很 小 的 ”也 可 以 使 用 Fisher 提出 的 精确 方法 《 即 不 
用 定理 3.5.2 决定 站 ,的 界限 ), 这 些 在 应 用 统计 书籍 中 述 之 甚 详 ， 
此 处 就 不 介绍 了 ， 

对 了, 了 连续 取 值 的 情况 , 将 其 适当 地 离散 化 , 也 可 以 用 询 联 
表 检 验 其 独立 性 . 


《六 ) 齐 一 性 的 检验 


这 问题 的 一 般 所 法 是 ， 设 有 g 个 总 体 ， 从 第 6 个 总 体 中 到 出 
tid， 样 本 素 a …， 下 wo bl，…，g， 且 金 体 % 一 向 十 … 十 me 个 
变量 { 工 也 是 独立 的 ， 要 检验 假设 

瑟 : 这 g 个 总 体 有 相同 的 分 布 
这 里 也 可 以 是 完全 未 知 , 或 形状 已 知 但 包含 有 限 个 未 定 实 参数 . 

这 个 问题 也 称 为 多 样本 问题 (Multi-Sample Problem) . 是 重 
要 的 统计 问题 之 一 , 以 后 在 第 五 .六 章 中 我 们 还 有 机 会 讨论 这 个 问 
题 . 此 处 着 重 在 考虑 每 个 总 体 只 到 和 m 个 值 (m 有 限 ), 因而 可 用 x 
检验 法 来 处 理 的 情况 , 当 总 体 取 无 穷 个 值 时 , 用 离散 化 的 方法 , 也 
可 以 用 这 里 的 方法 来 处 理 . 

以 到 记 第 5 个 总 体 , 5 一 1 …, g， 每 个 WW! 取 二 …，m 为 
值 , 记 Pu= 卫 (WV4 一 站, 则 同 分 布 的 假设 及 相 当 于 说 向 量 《pas …， 
Pm) 与 $=1，…, 9 无 关 , 由 于 这 个 原因 ,在 这 里 的 情况 下 常 将 司 
分 布 性 称 为 齐 一 狂 《Homogeneity)， 

我 们 举 几 个 鲍 子 来 说 明 . 

例 3.65.7. 某 工厂 分 三 班 生 产 ,产品 分 一 ,二 三、 四 四 等 ， 要 
检验 “各 碍 所 生产 的 产品 质量 完全 一 样 ”这 个 假设 . 

以 py 记 “第 4 班 生 产 出 了 等 品 "的 概率 , 则 “各 班 所 生产 的 关 
品质 量 完全 一 样 ”可 理解 为 (pu, …, pu) 与 5~1, 2 3 无 关 ,于 是 
得 到 一 个 典型 的 齐 一 性 检验 问题 我 们 也 可 将 上 述 假设 形式 地 写 
为 “存在 pr pa pa pu 都 非 负 且 和 为 工 致 各 班 生产 出 了 等 品 
的 概率 都 是 Ps, ~1，…， 各， 注意 在 此 并 未 指定 py 之 值 . 

例 3.5.8. 设 在 7 个 人 类 群体 (如 9 个 不 同 的 民族 ) 中 考察 其 
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各 型 的 分 布 , 假定 在 每 群体 中 , 进 弄 分布 都 吉 守 例 3.5.4 所 阐述 的 
规律 ， 要 检验 假设 . “这 个 民族 的 得 型 月 相同 分 布 ， 这 个 假设 
等 价 于 ， 在 在 非 负 且 和 为 1 的 jbo，go， re, 使 各 民族 的 DA、BH. 
AB 上 而 型 频率 (概率 ) 分 别 为 73 炬 十 2poro, 噶 十 29ore 和 32Pogo. 
注意 在 此 也 未 指定 Po Jo "76 之 值 ， 

例 3.5.9. 设 有 g 个 总 体 ， 其 分 布 分 别 为 了 ,，…，.Fe (都 未 
知 ), 要 检验 假设 “这 个 总 体 有 同一 的 焉 态 分布 ” 这 等 于 假设 ， 


“存在 c>0 及 中 政 了 (O22) 对 tl …, 此 处 g 


人 

和 o 之 值 也 没有 指定 。 在 本 例 中 总 体 是 连续 的 ， 但 经 过 将 (一 co， 
co) 分 为 有 限 个 区 间 而 实行 离散 化 后 , 可 转化 到 前 两 个 例 的 情形 . 

这 样 , 我 们 提出 下 面 一 般 的 模型 设 有 g 个 总 体 全 1,…, 
每 个 总 体 取 1，2,…，m 等 mn 个 值 ， 设 二 (的 ，0 = ( 俯 ，…， 的) 
EB,， 5 一 1，…，m, 满足 极限 定理 3.5.2 中 对 mi( 乒 的 要 求 ， 设 
到 g。…,， 福 io 为 自 第 总 体 中 抽查 的 iid、 样 本 , 6 一 I，…, 4, 且 
全 体 s 一 m 十 … 十 ma 个 及 4g 是 独立 的 , 可 以 提出 两 个 问题， 

1* 是 否 每 个 总 体 全 ,的 分 布 都 在 分 布 族 {m0),j 一 1，…， 
m, 0E@} 内 ? 就 是 说 , 要 检验 假设 

五 i: 对 任何 4 一 1 …, 4 存在 gcG, 致 
PWi=D —m (0%), j~l, ££ mm. 

2。 在 1° 得 到 肯定 何 答 ( 通 过 检验 或 事先 候 定 或 已 知 其 成 立 ) 

的 基础 上 , 进一步 提出 检验 假设 
惠 s: 这 g 个 总 体 有 相同 分 布 , 即 存在 9" EB 致 
PW=N nO), j= mm, El, 1 q, (8.6.16) 

第 一 个 同 题 可 用 定理 3.5.2 处 理 ， 对 每 个 6 一 1，…, g, 算 
出 褒 2、 洁 百 : 成 立 ,应 有 名 0 -一 > 戏 -s 4、 也 可 以 在 分 别 对 每 个 
总 体 进行 检验 之 外 , 再 利用 名 一 遍 No 一 > zw so 的 事实 (在 


Hi 成 立时 ) 进行 一 个 全 面 的 检验 ， 
关于 五 ; 的 检验 ,一 个 可 以 设想 的 方法 是 ， 对 合 样 本 {ZX 
se 


一 1 一 1，…，g} 利用 定理 83,5.9。， 这 是 由 于 ,车 页 ;成 
立 , 则 { 瑟 中 是 从 某 一 个 具有 稻 布 (3.5.16) 中 抽出 的 ii4， 样 本 . 
若 负 为 息 的 内 点 , 则 定理 3.5.2 可 用 而 合 样本 算出 的 契 , 值 应 有 
极限 分 布 她 -* rz。 但 这 未 必 是 一 个 好 前 方法 ， 因 为 各 总 体 在 各 组 
内 的 僵 亏 可 能 互相 抵消 ， 因 而 可 能 出 现 表 面 上 名 。 值 不 大 ， 其 实 
五 * 并 不 成 立 的 情况 一 个 较 好 的 处 理 方法 如 下 : 先 分 别 就 每 个 总 
体 对 其 2 值 进行 估计 ， 得 P89, i 一 4，…。g, 假定 这 个 估计 满足 定 
理 3.5.2 的 要 求 ( 即 是 第 《组 样本 的 似 然 方程 的 相合 解 )， 然后 ， 
在 五 ;成 立 的 假定 下 , 作 合 样本 的 似 然 方程 , 设 这 方程 有 6 的 相合 
解 和 (当然 , 是 指 在 吾 。 成 立时 , 名 为 9 的 相合 估计 )， 这 样 , 关于 
从 第 二 总 体 中 抽出 的 由 个 样本 下 sn, ，…， 互 。。 其 落 在 第 了 组 内 的 
理论 频数 有 两 个 估计 , 即 ry (B86) 和 9m 雹 )， 加 果 五 , 成 立 ， 
这 两 个 估计 应 比较 接近 , 这 引导 我 们 考 碟 统计 和 量 
E:- 吉 BD es G0) — GOFF 
i 1 ru ry (On) 
后 当 下 ; 较 大 时 否定 吾 。 这 个 检验 基于 下 而 的 极限 定理 . 
定理 8.65. 和 .在 上 述 关于 各 ( 纺 ，B 抬 和 所 的 假定 下 ， 若 假设 


(8.5.16) 成 立 , 且 多 是 日 的 内 点 , 则 当 加 ->o0 时 , 区: 工 > 态 w_1 
定理 的 证 朋 依 赖 下 面 的 引 理 ， 
引 理 383.56. 设 (于 全 王 多 )， 和 一 1 人 相互 独立 且 分 别 
服从 多 项 分 布 亲 (mm，ma，…，mm)， 6 一 十 9， 记 
r-( 了 站 一 Fh 条 1 Rm mn ， 
Th 1 #1 Nm 

nm ,Pn 

Vm ” “ Ta rim 

i= Voy Vrms; 0, =, Oy 0 0, 2 0)', 
a = 《0， 人 0; Vy rs Wm 3 0, i'y 0 ， 


语 和 


wa= ‘0, “7 0 0, 1 O3 NR YY Wm) 'p 


1 


wt 


面 忆 为 nq 阶 对 称 常数 方 阵 , 则 如 C2= : 且 存 在 cj,…:,a 致 Cp 
abst 一 lg 必 有 了 CE -> 好 当地 co0, 对 i 二 1 
9， 其 中 3 二 (OO) 一 (ox, po 中 不 为 9 的 个 数 )， 
这 个 引 理 是 引 理 3.5.1 的 例 行 推广 ， 因 此 将 其 证 明 作 为 练习 
贸 给 读者 . 
定理 的 证 明 , 设 参 数 真 值 为 六 = (M8, …, 纵 。 记 
w= m0), hy— mr (B), Su= m0), 
又 矩阵 B, 也 == B' B 的 意义 与 定理 3.5.2 的 证 明 中 一 样 ， 由 于 所 
为 8 的 相合 估计 旦 wt 四 为 站 的 连续 函数 , 易 见 
KR {8.5.17) 
以 my 记 互 ai 中 取 了 的 个 数 ， 定 交 
Y= (Pa re 7, Fen), 
To= (ny 一 中卫) ， 
C= CU Da 
Us,= {ne ty — 多 /) /re Wy 
FTF» (Fis, es V'sms “ey Vua, “oy 了 om) 
Vay= (ny Re — me mn) /NV se ms, 
Wo (Wis pp 再 
Wy=— Cn S41— ne m7) /rhe ty. 
册 UU= ~- 了 玉 ， 由 定理 3.5.2 的 证 明 中 已 得 到 
V—— DIAG(BF-1B', :.., BF-1BYY (3.6.18) 
此 外 及 以 后 我 们 总 以 DIAG(4,， 晴 ,…， 上 ) 记 一 分 所 矩阵 ， 其 主 
对 角 线 上 各 块 依次 为 用 , 屋 ,…, 上 ,其余 的 块 为 0. 
现在 讨论 仇 ， 记 n= 吉 十 … 十 me， 洁 作 补 充 钥 定 


ln Yo, 存在 , t=1, 人. 


记 入 一 高 rw/r， Punu/m， 则 入 一次 pu， 因 为 多 为 合 样本 似 
然 方程 之 解 , 有 


+ Blle 


Er _ 一 了 。。 
"写生 二 0， r=1, + bE. 


此 处 为 简便 计 已 记 负 = 而, …, 引 )'， 此 可 写 为 
站 oo Br 
el 党， a0. 

-六 ~ YVR) 


产 :1 0, 3 六} 
利用 全 有 连续 一 阶 仿 导数 及 车 ， 得 
Vn 总 wi {Py— wD) Bm 
,} 885. 
=], ,上 , (3.5.19) 
Frs 为 矩阵 天 的 他, 身 元 ,上 式 左 边 可 写 为 
» ep wD Or 


EE 


TEy 


1 六 1 了 
VN/ 名 VR NH) 工 < 各 
= A 党} -党 饥 fm 包产 一 卫 Br 
B 
= YDIAGO, Go ; |. 
B 


此 处 G@/ 一 MeyT。 此 式 与 (3.5.19) 结合 ,得 
DV GB) — PB BY DIAG OG, -…, G0 Y, 


(3.5.20) 
再 利用 到 为 6 的 相合 估计 及 wy(9) 的 连续 性 , 得 
- [4 . n 1 Er 
Ws -Vn {0) ar Be 
此 与 (3.5.20) 结合 ,得 
B 
We DIAG(G,, .…, GO| : J 
B 
-DIAG(G@,, -…, GO) Y, (8.6.21) 


+ 


了 于是 由 (8.5.17)，(3.5.18)， {3.65.2 及 UV= -你 知 ， 


一 (3.6.292) 
其 中 
CDIAGCB FB', », BF-!B')—DIAG(G, .…, G0) 


2 

| : jr, 一生 一 下 

B 

要 证 (3.5.22) 后 一 式 , 需要 证 明 C?=C， 为 此 注意 Hi?= 丘 .而 
3 TDIAGC », Go 


B 
| : j 天 ereoenees ,GO 
B 


B 
| : j 关 wireuae 机 Cro) 。 
BB 

但 (BI -BY DIAGG?, .., @% 


B 
{ : ) etn- nao-r 
如 mL j=l 
这 证 明了 HI 一 Hs 又 

HH= DIAG(Vo BF-1B', .., or BF-1B" 


/BB 
人 : jermouee GD 
Ba 

voB 
-| J [BODIAG CGE, -.., @7 = H,, 

vouB 
区 H;: Hh=H; 五 4 一 (Hi H»'= H: ~ Hs,, 因而 

C= (HH)''- Hi-H, H,~H, HH? 
-Hh—H=C. 


1d. 


i 


这 证 明了 (8.5.22) 以 及 刀 为 宪 等 阵 , 再 注意 到 关系 式 BB's …， 
wmrm) 一 0 立 得 

Ch=D, j=1, *, 9. 
于 是 由 (8.5.22) 及 引 理 3.5.2 得 到 , 当 %n 一 oo 时 (在 m/w 一 的 
补充 假定 下 ), 有 


五 
下 


其 中 as—Ik(C)=tr(0) =—t(H) —tr(Hy. 
而 r=ygtr(B FB) -gr(F-1B' DB = -qk, 
而 (利用 tr(4B) =tr(84)) 


B 
tr (HS) -| : jmp - | 
B 


BB 
-| jee ea 
B. 
B 
| | : | 
B 


~tr| FEF |-ir() =-k 
因而 环 (C) ==) -t(D)=-(g-Dh 若 
Es > XE Ly, {3.56.28) 

由 于 此 极限 分 布 与 to 二 无 关 , 易 见 {3.5.23 在 没有 前 述 补 充 条 
忻 时 仍 对 , 这 只 需 用 反 证 法 , 设 (3 .5.28) 不 对 , 取 一 适当 子 序 列 即 
可 得 出 矛盾 , 定理 证 毕 ， 

庄 总 体 的 分 布 完全 未 知 的 情况 相当 于 

日 一 (0 On), PW,~ DD -8,, j=—1, mn, Pn —1— p33 
诸 外 在 第 $$ 样本 下 及 在 合 样本 下 的 极 大 似 然 估计 分 别 为 rs 及 
加 wu/m 这 是 似 然 方程 的 解 且 是 9 的 相合 舍 计 ， 因 此 定理 3.5.4 


+ 史 要 


的 条 件 全 都 满足 , 由 下 ;的 公式 算出 
- 三 的 加 

Rn( 写 误 和 1). (8.5.24) 
此 处 各 一 襄 my、 叉 此 处 一 mw 一 1， 帮 得， 在 假设 互 成 立 , 即 庶 
总 体 有 同一 分 布 时 , 有 


人 (8.5.26) 
当 % 一 00, 对 j=1, …:, gq. 
公式 (8.5.24) 与 公式 (8.5.15) 的 形状 完全 一 样 ， 极 限定 理 的 
内 容 也 .- 样 ， 由 于 这 个 表面 上 的 相似 性 ，- 些 初 等 教科 书 把 这 个 
情况 与 (五 ) 中 的 独立 性 检验 问题 不 加 区 别 ， 都 按 { 五 ) 中 的 论证 去 
处 再， 然而 , 我 们 看 到 ,尽管 存在 上 述 形式 上 的 相似 性 , 这 两 个 问 
题 在 问题 所 法 ， 检 验 统计 量 及 其 极限 分 布 的 导出 过 程 是 如 何 的 不 
同 ， 这 差别 其 实 不 难 理解 ， 在 独立 性 的 问题 中 只 涉及 一 个 总 体 
( 蔗 , 卫 ), 而 在 此 涉及 若干 个 总 体 ， 当 然 , 可 以 在 独立 性 检验 问题 
中 把 丕 的 每 一 个 值 看 成 相应 于 一 个 总 体 ( 即 了 了 在 到 取 这 个 值 时 
的 条 件 分 布 ), 但 即使 如 此 二 者 仍 有 根本 不 同 ， 对 (五) 中 的 问题 来 
说 , 各 总 体 的 样本 大 小 mw 是 随机 变量 , 而 在 齐 一 性 检验 中 , mm, 是 事 
先 选 定 而 没有 随机 性 , 这 当然 不 是 一 回 事情 . 


(七 ) Ronmerop9e 检验 及 其 它 符 验 


除 Pearson 的 x* 检 验 让 ， 还 有 不 少 其 它 的 窒 验 ,， 其 目的 都 在 
于 判断 一 组 观察 样本 是 音 与 某 一 理论 分 布 符合 ， 其 中 最 著名 的 是 
Rormmoropoa 在 1938 年 所 出 和 的 检验 ， 

首先 给 出 下 面 的 定义 . 

定义 3.5.1、 设 辐 ，…, wa 为 个 实数 , 划 

auto 一 (zt po 中 不 超过 的 个 数 ) /rn， 一 ce<z<eo， 

称 为 这 ”个 数 2， …, sn 的 经 验 分 布 笑 数 (了 Empirical Distribution 
Function). 

设 一 个 一 维 总 栖 有 连续 分 布 诈 数 五 (w)}， 卫 1，…:， 卫 ,为 自 这 


» 和] 


总 体 中 抽出 的 iid， 样本 ， 以 了 记 Xi1, ny Xn 的 经 验 分 布 函 
数 , 则 由 大 数 定 律 得 
P {Yim Fl(e) =F(0) =1, 


对 任何 固定 的 = 实际 上 可 以 证 明 更 强 的 结果 ， 
Plim[ gup_ Ps 人 —F(w)|]=0)=1. 《8.5.29) 


这 叫做 Glivenko 定理 (证 明 可 和 参看 [8])， 这 个 定理 启示 我 们 ， 为 
了 检验 假设 五 : 一 Zo(Fo 为 一 事先 给 定 的 完全 已 知 的 连续 分 布 
函数 ), 可 引进 统计 量 

D,— sup Fw) — Fol®)|, 


然后 当 卫 . 较 大 时 否定 已 设 吾 、1933 年 Komoropop 证 明了 下 面 
的 著名 定理 . 
定理 8.5.5。 (KomzxoropoBy , 当 假 设 五 成 立时 ， 
0 一 Jam PID<NMY nn) 


一 ,~D*orp (~2k ND), A>0, (8.5.27) 


根据 这 个 定理 可 以 得 到 假设 互 的 一 个 天 样本 检验 ， 任 给 
0<a<l, 找 Xo， 致 中 Ga) -1 一 然后 当 Dayw 时 否定 五 ， 
例如 , 当 a=0.05 和 0.01 时 , %, 分 别 为 工 .由 8 利 工 ,838、 至 于 区 
的 计算 , 可 以 先 将 样本 2 2 按 太 小 排列 得 yD) 所 9 所 
然后 显然 地 得 出 


有 ,一 Ia 工 Folwey), 


之 一 本 (wen) ” 


人 oo 一 Po (we)) |; 


| EE 


， 


与 x- 检验 比较 ，Koxxoropos 检验 的 灵敏 上 度 较 高 ，Williams, 
Masgey 等 作 过 这 方面 的 研究 .例如 , 在 w 一 0.05 时 , 若 记 


"B16%。 


如 一 snp_ [oo — G1. 


这 里 GG 为 一 连续 分 布 函 数 ， 则 为 了 使 检验 在 对 立 假设 人 处 的 功 
效 值 达 到 0.5, 用 x 检验 所 项 的 4 值 约 为 用 Kozworopos 检验 的 
4 值 的 一 倍 ( 当 然 , 在 同样 的 样本 大 小 nn 之 下 , 且 "m 比较 天 )， 这 意 
味 着 ， 在 同 祥 的 试验 规模 下 , x 检验 的 "分辨 率 ”大概 只 有 
Komatoropon 检验 的 一 半 ， 当 n 一 200 时 ， 这 个 比值 约 为 0.6， 
Konxoropos 检验 的 另 一 个 好 处 是 , 其 统计 量 值 不 条 x2-_ 检 验 中 那样 
受到 分 区 间 方 法 的 人 为 因素 的 影响 ， 然而, 这 个 检验 只 适用 于 总 
体 分 布 完全 已 知 的 情况 ， 在 总 体 理论 分 布 包含 未 知 参 数 ， 即 为 
oke, 四 的 情况 , 人 们 往往 用 样本 sw …， ws 对 8 作 一 估计 所， 然 
后 计算 
4= sup |P,(®) 一 Fo 加) |. 

然而 , 这 时 对 4 面 言 极限 分 布 (8.5.27) 已 不 再 成 立 . 实际 上 , 这 极 
限 分 布 与 Zo(w, 办 有 关 而 不 是 “Distribution-free” 的, 这 样 就 无 
法 定 出 4 的 应 有 的 界限 ， 在 这 一 点 上 Komxoropos 检验 就 不 如 %2- 
检验 . 

我 们 将 定理 3.5.5 的 证 明 放 到 下 一 段 ， 现 在 再 介绍 某 些 与 
Komxoropon 检验 类 似 的 检验 ， 

1I986 年 Capaoa 在 COramar 和 Yon-Miises 较 早 工作 的 基础 上 
提出 了 检验 统计 量 


w=- [Flo) — Folo)J’a Fole). (3.5.28) 
具体 计算 时 用 下 面 的 公式 
>”- -+ 工交 | Poco 一 2 ] 《3.5.29) 
证 明 很 容易 ， 只 需 注意 由 。 的 连续 性 
全. [km 一 了 oO]2GFot) -全 [~ Tarocs) 


内 


= ] 站 
~-{( 雪 二 (到 寺 (oo8D+ 本 (OO 
C=2, 83, "ey 有 一 工 


=»'B1Te 


a 


UR Far) -i 


[5.0 — —Polw) dPo(o) = 1-0 


此 处 O:=Bolmw), 经 过 很 容易 的 简化 , 即 得 (3.5.29). 

现在 证 明 一 个 有 用 的 引 理 . 

引 理 3.5.8。 设 一 维 随 机 变量 子 的 分 布 画 数 也 连续， 则 了 
一 XX) 的 分 布 为 RCO, 妃 ， 

证 . 任 取 4 0<s<df,. 由 了 的 连续 性 , 存在 mo, 致 下 (wo) 一 a 
取 z% 为 适合 这 关系 式 的 最 大 者 。 则 有 {了 所 中 一 {所 zo}, 因而 
P(P <g) 一 下 (wo) 8， 得 证 . 

根据 这 个 引 理 , 在 计算 全 ”的 数字 特征 及 其 分 布 时 , 不 失 普 遍 
性 可 假定 ze 为 人 0, 1) 均 名 分 布 (当然 , 是 在 假设 五 = 了 成立 时)， 
由 此 经 过 简单 计算 不 难得 到 (在 零 假 设 下 ) 

一 久 


盏 (1 下 ，Var( 匀 一 各 二 (3.5.30) 


计算 过 程 留 给 读者 , Cuapros 在 1936 年 证 明 ，nWV? 的 特征 函数 当 
nm 一 cc 时, 有 极限 (在 零 假设 下 ) 

$8) ~ {2 0} /gin[ (20) }Y2 
Anderson 和 Darling 在 1952 年 通过 反 演 人 $() 得 到 my? 的 极限 
分 布 ,并 作 了 一 些 数 和 计算 , 例如， 有 limP(nW*>0.748) 一 0.01， 


当 概率 0. 代 改 为 0.05 或 0.1 时 ， 界 限 0.748 分 别 改 为 0.461 和 
0.347、 利 用 这 些 结果 可 作出 基于 统计 量 钱 ? 的 关于 假设 了 -也 
的 大 样本 检验 ，1958 年 Marshal 证 明 , mF? 趋 于 其 极限 分 布 的 
速度 很 快 ， 以 致 在 ” 象 3 这 人 么 小 时 ， 上 引 的 界限 值 0.743, 0.461 
和 0.347 等 已 成 为 精确 到 三 位 的 数 . 

然而 , 这 个 检验 也 有 象 KomeoropoB 检验 一 样 的 缺点 , 即 当 总 体 
的 理论 分 布 不 完全 已 知 时 , mnW?”( 当 然 , 这 时 在 计算 人 序 * 时 必须 先 
对 理论 分 布 中 的 参数 进行 居 计 ) 的 极限 分 布 的 “distripation- 全 ee” 
的 性 质 已 不 再 保持 ， 因 此 我 们 就 无 法 (即使 是 近似 地 ) 掌握 基于 这 


s $12。 


种 统计 量 的 检验 的 水 平 . 

在 结束 以 前 我 们 附带 提 到 一 下 Cipnon 的 一 个 检验 ， 设 
于 41，…-， 芝 和 和 斑 a1，-…-， 节 ow 分 别 是 抽 自 具 和 连续 分 布 函数 玉 1 
和 了 《者 未知? 的 总 体 的 iid. 样本 , 要 检验 假设 

H: Fy= Fs. | 

这 蚌 ( 六 ) 中 提 到 的 多 样本 问题 当 g-2 的 情况 ， 岂 两 样本 问题 ， 在 
统计 文献 中 有 很 多 讨论 。，Cmapaos 的 检验 基于 下 面 的 极限 定理 ， 

定理 3.5.6 (CxaxpnoB) .以 Bas, (2) 和 了 nC2) 分 草 记 下 at pv， 
天 6 及 于 4 的 经 验 分 布 函数 , 令 

了 sm op (Fin (一 下 ou) 


了 ww 一 | am CF) — Fan, (2) | ， 
则 当 假 设 吾 成 立时 , 有 


工 一 6 2 妆 和 > 
limP V2 Me Dt, < -{ ， ’ 
Pian ( “ ) 0, 当 入 0, 


lm P (Vi Drum < )-Q0). 
全 (0) 由 (3.5;27) 定 出 . 

在 KoxxoropoB 和 CgpHOB 的 开创 性 工作 以 后 ， 有 关 这 些 统 计 
量 的 研究 工作 有 了 不 少 进 展 ， 一 些 作者 提出 了 形形色色 的 与 之 类 
似 的 统计 量 , 研究 了 它们 的 极限 分 布 ， 这 方面 的 工作 与 随机 过 程 ，, 
概率 测度 的 绊 收 和 敛 等 理论 关系 密切 . 


(CA) Honmoropos 定 更 的 证 明 


继 1933 年 Komuoropoa 的 原始 证 明 后 ，Heller 在 1948 年 给 了 
田 一 个 证 明 . Doob 在 1949 年 给 了 一 个 启发 式 的 证 明 ， 以 及 其 它 
茶 些 作者 的 证 明 ， 如 从 O00, 41) 或 DOO, 1) 室 间 上 概率 测 产 弱 收 
敏 理论 出 发 ， 易 作出 此 定理 的 篇 清 证 明 ， 以 下 写 出 的 葬 Fellar 的 
证 明 。 
sl 


定义 YE: Folyr) =E/n, k=1, Wy 多 一 1], 尾 给 自然 数 w 工科 
?An 一 上 考察 事件 


{ sz — Polo))>4} 


{存在 %， 致 Plw) 一 了 ol) > (3.5.3D) 
由 分 布 6 的 连续 性 , 不 难 知道 上 式 右 端的 事件 等 于 

{在 在 至 也 (@) 一 Fole) 一 
由 于 6 为 自然 数 , 这 事件 等 于 


{存在 区, 臻 事件 Arlo) 成立}, 
其 中 Le(o) ~{ 芝 i。…, 蔗 。 中 恰 有 下 -te 个 <yx}， 同 样 得 
{_inf CF,(0) —Folo)) <—2} 


一 种 二 要 二 mm 


一 {存在 站 , 致 Ar( 一 中 成 交 }, 
由 此 可 知 


{D>8)~ {hr UAr(-O}. (38.56.32) 
定义 事件 U,V, 如下， 
U, 一 {在 事件 序列 1(0), 4x( 一 0)，*… 4a(0)， 
4 一 站 中 ， Ar lo) 第 一 个 发 生 }， 
V, 一 {在 同一 事件 序列 中 ，44( 一 60) 第 一 个 发 生 }. 
则 诸 事 件 Ui, wi Us, 下 2 Vs 两 两 互 斥 且 其 并 仍 为 (3.5.82), 故 
P( D>E)-B PCD+P(G7D]. 
由 全 概率 公式 
P(Ar(o)) ~ [PU PArC) ID,) 
+P(V) PAG) IPD], 
PAs(—0)) ~ [PU PAs(-O ID) 
+P(V)P (Ax (~0 ID], 


(3.5.33) 


中 和 2O 


骨 于 五 1， pw 三。 为 分 布 Fo 的 4. 样本 及 yr 之 定义 , 显 见 
Pp (Ax (@)) ( gp ， 到 ) (1- EY, 
了 (dr 多 17 


-EE 


重 


下 一 个 名 一 狗 一 他 
Pu 的 | 有 人 
—( 一 个 的 -20 A 
-EE 


= 土 ]， 圭 2，…， 土 (nn 一 1)， 且 ( -9 当 m0 及 mm>n， 丸 


?世上 因此，(3.5.383) 成 为 以 卫 W 和 了 (= 为 未 知 数 的 方程 
组 . 解 出 它们 即 可 得 卫 ( 了 ,> 二 外 
壤 令 Palo) et EI (Ft! c=0, 士 二 
则 有 dx) 一 Br 0) Do_x(—0) /Pn (0), 
了 Cg [Uy) = Pr_r OT rT—0 /pn rl—O), 
了 (do IV 一 Pr 他 的 入- 一念 /Pr 
故 若 定义 
wr— PUD PO /Ps 0D w= PT p00 /prto), 
代入 (3.5.23), 得 
pr C0) -为 [xpr-r(0) 二 wpr-r(2o)]， 
Pr(™—0) - 袜 Bu-pa_r( -~ 20) + vrpr_e (0)], 


且 P( Di><)- 包 [PCD+PGJ] 


-二 D3 [pre C—O) 4 Par(0) 0] = Pst ga. 


其 中 (注意 px, 9r 与 % 有 关 ) 


"Bl 


Tr 


Pr- 2 Spr- (一 信访 ， 


CE 一 pr- (eo 区 =1, 2, 
定义 母 务 数 


GD = pris, GD) = EB grts, Gu) = Hurts, 


GD = Bs G6 OD pg 的 本 


则 由 gx, gz 之 定义 立 得 ， 
Grol GD GU ~0) /pn 0), 
Gaeld) = GD Gs, 0) /pat0). 


现在 固定 >0, 取 o~ [hm]. 设 当 mn->oo 时, 下 欧 于 某 个 mm>0 
则 由 Stirling 公式 易 得 
pr(O)~ Qnk) -erp(—B /EK). 


此 处 ~ 表示 左右 两 边 之 比 ， 当 nm->oo 时 ， 赵 于 I， 置 区 一 mn. 
== [hn , 得 


m2 pr (DV) ~ (Gorm) 7 orp (一 二 /mh 
由 此 式 及 
GT， Don) or 六 pr Da) ots, 
得 到 lim Ge [in]) 
= (2%) =a m/s erp (—tm— 立 -) dm. 


这 个 将 无 限 和 化 为 积分 的 极限 步 又 的 合法 性 容易 验证 ， 以 了 记 上 


式 右 端 之 积分 , 不 难 算出 
or 


¥ ir3 
ls | 工 
| 
再 利用 当 与 -一 0 时 ,7~(z/5 的 事实 ,得 盖 ( 亚 ] exp(~ v3 


" B22 8 


{8.5.35 


央 而 
lim Gertm，fxev) = (QD -verp(— Va RD), (8.5.36) 


再 出 方程 组 
Gon, [mt/]) = Ge) Got, 0) 
+Go Ge .an ), 
分 《et _ [hn ) = 他 {e- tw) 仓 (en® 一 儿 [he 》 
+ Ge 的 ， 
得 知 
lim Gu (em 一 lim Go (om 
-lim Gy Dam") /tm Ge 0) 
十 Hm G (er, 2 [nv])} 

=63p(—v DN/ [lerp(— v8BHDY. (38.5.37 

香 由 (3.5.3 加 ，(3.5.36)，(3.5.37) ,注意 到 各 (0) ~ (2m) -73 得 


im 鞋 -am Nm 斑 a rm ezpk 一 局 有 ?人 
Hn TD ne (9 1+erp(— ~V BN) 


开国-( 王 六 名 (Dexp (一 可 站. 
但 易 通 过 直接 计算 证 明 ， 工 从 就 是 人 的 Laplaoe 变换 
人 7@e mm 其 中 
FO =D Dorp(—2r /9 


由 于 当下 所 nw 时 ， 有 Wrzr 所 1 又 (0) 随 ” 增 如 而 下 降 ， 知 pr 所 1 
尘 任 何 sw 下 . 因此 可 取出 自然 数 的 于 序列 {tw}， 下 pinm 王 Cn)， 
当 :- 一 ce， 对 任何 品 >0、 于 是 有 


lim 过 ee 一 lim 去 3 Dre™ Em 
-lim 之 有 re 去 一 | 9 me mdm. 
这 说 明太 gCm)e-mdm~]" 了 mye" dm。 由 Laplaoe 变换 的 唯 
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一 性 知 9 Com) = Cn) (利用 fg 的 连续 性 ), 由 于 这 极限 与 序列 fm} 
无 关 , 知 ?om 一 了 (m9) 对 任何 吕 当 m~> oo, 特别 , 取 训 =1, 知 limp。 


-7 区、 同 理 知 lim gu= 了 (CD， 最 后 得 到 
lim P ( D> #-)- lim (p+ gn) ~2f (1) 


~2 -Dorp(~2r))). 
这 与 (8.5.2) 显 然 是 一 回 事 ， 定 理 3.5.5 证 毕 . 


$3.6. 伺 然 比 答 验 


(一 ) 定 义 


设 变量 于 的 样本 空间 和 分 布 族 为 {( 受 ,二 sw Po ,3E 时 . 设 
了 对 了 ww 上 的 某 个 w- 有 限 测度 上 有 密度 Fi 凡 一 a 了 P, (8@) /dp 
考 虚 检 验 问 题 (8.1. 几 ). 

定义 3.6.1。 称 聘 数 

了 tc) ~supf (%, 0) /emp fl%, 人 (3.6.1) 
为 似 热 比 ( 更 确切 地 说 , 关于 检验 问题 名 .1. 几 的 似 然 比 }， 和 任 一 形 
如 
1， 当 LAW) >>, 
$0) ~— { 0, 当 LRG) <o. 
的 检验 省 称 为 他.I. 蕊 的 似 然 比 检验 《Iaikelihood Ratio Tesb). 

这 个 构造 检验 的 一 般 方法 是 Weyman 和 Pearson 在 1928 年 
提出 的 , 它 在 假设 检验 中 的 地 位 , 相当 于 家 大 似 然 估 守 在 点 估计 中 
的 地 位 .这 是 一 个 应 用 很 广 的 方法 , 而 且 , 由 它 造 出 的 检验 常 具有 
种 种 最 优 性 质 , 前 用 节 中 担 到 的 不 少 重要 检验 都 是 似 然 比 检验 2 

了 D) 严格 地 说 ,为 恒定 义 8.6.1 完全 合法 ， 必 须 证 明 工 让 (全 为 全 gw 一 可 测 。 这 在 常 


见 例子 中 可 直接 疾 由 ， 对 一 般 情 况 带 要 一 定 的 条 忻 。 例如 ,在 对 和 如 者 是 欧 氏 的 且 
7 Ge 们 有 一 定 的 连续 性 真 时 ,可 以 证 明 上 述 可 测 位 ,我 们 不 深入 这 个 细节 ， 


3 4 


(8.6.2) 


从 定义 厦 出 ,车 他 他 员 依 赖 于 LB 且 为 后 者 的 严 增 函数 ， 
则 似 然 比 检验 可 写 为 


$0 ~{ 00>o 


0， 当 GWw) <o. 
的 形式 . 
例 3.6.1. 设 生 。，…。 互 。 为 抽 自 下 人， 中 中 的 蚤 .样本 ， 
要 检验 | 
H:a=mmer KEK: sim 


在 此 fw 四 ~ 真 ( 二 zp (一 蕊 ?的 一 中? 易 见 
sup fe, 0) =eup {(V wo) orp [—gr nf oo] 
-sfvsore[- 吉 入 oa] 
= (Qn /0) sgn (SS (mu— )” 
而 用 同样 的 作法 得 到 
supf te, 0) ot [ 25 Bo— oa0)? | 
A | az (BD +n Gooy)] wa 
由 此 得 出 


| SE-B | 
LR(OD “1 
EDtn Fm) 
它 显然 是 + 统计 熏 


Vim] /YET-T) 
的 严 增 函数 ， 由 此 得 出 本 问题 的 似 然 比 检验 有 否定 域 {1f]|>>o}， 
即 为 双边 一 样本 # 检验 . 

同样 可 以 证 明 ， 以 前 讨论 过 的 很 多 重要 检验 ， 如 例 3.8.6 
一 3.3.8 中 的 双边 检验 问题 中 所 求 出 的 检验 是 似 然 比 检验 〈 不 过 ， 


"B26r 


a ne he dT he 


对 例 3.3.6 和 3.3.8 而 言 ， o*=03 及 吕 =03 的 UMPU 检验 的 界 
限 值 与 似 然 比 检验 有 所 不 同 *)。 由 于 这 些 都 是 一 些 例 行 的 计 算 ， 
在 此 不 多 列举 了 。 通常, 在 计算 比值 8.6. 几 的 分 子 分 母 时 ， 是 通 
过 似 然 方程 ， 这 样 就 有 一 个 似 热 方程 的 解 是 否 为 极 大 似 然 估计 的 
问题 。 然 而 , 在 似 热 比 检验 的 大 样本 理论 中 ,重要 的 是 车 用 “ ， 
6(w)) 代 赫 sup f(z, 四 ,6(z) 应 为 似 然 方程 的 根 , 且 为 9 的 BAN 


估计 。 而 不 在 于 be) 是 真正 的 极 大 似 然 估 计 。. 


(二 ) 似 然 比 的 极限 分 布 


除了 在 某 些 简单 情况 以 外 , 似 热 比 RC) 是 2 的 很 复杂 的 机 
数 ,其 精确 分 布 玲 于 求 得 ， 因 此 需要 考虑 当 样 本 大 小 无 限 增加 于 ， 
似 然 比 的 极限 分布 问题 ， 在 讨论 这 个 问题 时 ， 我 们 假定 蕊 :，…， 
玉 。 … 是 变量 互 的 记 . 样本 , 工 有 分 布 族 

{fw 信号 四， 人 = 0 的 EB}. (3.6.3 
” 恨 定 ; 

(i) 台 是 为 中 的 一 个 有 内 点 的 集合 . 

Qi) 分 布 族 (3.6. 引 满足 定理 3.6.6' 的 四 个 条 件 . 
关于 零 假设 集合 , 我 们 假定 它 是 + 维 的 。 这 人 句 话 的 精确 含义 如 下 ， 
存在 肥 中 的 一 个 有 内 点 的 集合 册 以 及 定义 在 4 上 的 个 函 

数 94: 
| 0,~ gu pi gy pr) Sl1, ~"y k. 
它们 建立 了 44 与 G5 的 一 一 对 应 , 要 求 每 个 在 和 4 的 内 点 处 有 站 
到 三 阶 为 止 的 偏 导数 ， 这 样 , 分 布 族 {fw, 的 a 0) ,65E8n} 与 
分 布 族 

让 多 Pap = Fe, py 0, Wr) A (8) 

一 Cap Pr) 8 PB), EA} 
(3.6.4) 
是 一 致 的 .假定 

了 然而 ; 着 拒 0 的 极 大 似 然 信 计 请 整 为 无 偏 后 再 计算 似 热 比 ， 则 得 出 的 答 验 为 
天 以 的 这 一 事实 的 证 明 留 给 汇 者 。 
* 2 


Giil) 分 布 族 (3.6. 当 满足 定理 2.6.6' 的 四 个 条 件 . 
关于 “6# 为 7 维 " 一 语 ,一 种 更 简单 直观 , 实质 上 与 上 述 等 价 
且 在 许多 问题 中 不 难 直 接 验证 的 解释 是 。 适 当地 重新 安排 分 布 族 
(3.6.3) 的 参数 (重新 安排 后 仍 记 为 四 ,使 
On = {= ,0 ON OERB, dri=" = =0 (3.6.5 
且 存 在 多 … 如 至 ( 纺 ，…, 扩 ，0,…, 0) 为 6 的 内 点 . 比方 说 
在 例 3.6.1 中 ,着 以 4 一 oo 和 o 为 新 参数 ,就 转 到 这 个 情况 , 又 如 ， 
要 检验 两 个 正 态 分 布 玉 (4, o) 和 态 (5, 0) 中 的 4 一 8. 可 以 用 新 
参数 (4, 5 一 a, 0) 代 移 原来 的 (a, 5，c) ,而 化 为 (3.6.5) 的 形状 . 
关于 伏 然 比 的 极限 分 布 的 重要 定理 是 Wilks 在 1988 年 证 明 
的 . 
定理 3.6.1 (Wilks) . 设 上 面 三 个 条 件 人 一 6 都 满足 参 
数 走 值 ?E65 且 相 应 于 和 的 内 点 名。 下 …， 环 为 自 的 iidl 
样本 ， 又 设 已 一 六 (Xu …， 三 0) 和 了 一 各,( 玉 1 …， 玉 ) 分 别 为 
在 分 布 族 (3.6.8) 和 (3.6. 人 中 0 和 9 的 似 然 方程 的 相合 解 〈 分 别 
对 9 和 9。 相合 ), 而 
LR'(Xy *, XO -这 JE /FCT ), (3.6.0) 
则 当 %- ce 时 , 变量 
Y,=210g LR'(X, :…, TA») (3.6.7) 
有 极限 分 布 验 -，. 
严格 说 来 , 此 定理 并 非 关于 似 然 比 的 极限 定理 ， 不 过 , 在 一 般 
情况 下 , 由 (8.6.6) 确定 的 LF" 与 (3.6 .一样 
定理 的 证 明 。 首 先 注意 , 由 定理 假定 知名 是 6 的 内 点 , 又 多 
和 全 分 别 为 在 分 布 族 (3.6.3) 和 (8.6. 汐 之 下 6 和 下 的 BAN 入 
计 . 记 
LO -也 7JCEe 0), Ll0) 1 FX, 9), 


B- (BW (BE|,,) 
| =P FX 
又 以 TC 办 和 了 (Cg) 分 别 记分 布 族 (8.6.3) 和 (3.6. 人 的 Fisher 信息 


"7 +* 


纸 阵 , 则 易 见 
Few) ~ BIO) Br 


在 定理 2.6.6' 中 我 们 证 明了 两 件 事情 ; 一 是 
VO.—0) —> NO, T+(0°)), 

一 是 车 令 

ED, EY -rt 
网 Vn ,一 99) 一 一 天 (Oo) .C99), 而 由 多 维 独立 同 分 布 情况 
的 中 心 极限 定理 , 知 也 (go) 一 > 入 (0, (96)), 现在 将 logZT(gq) 
在 全 处 作 Taylor 展开 , 注意 到 如 为 似 热 方程 之 根 , 有 

logZ(GJ 一 go ~ Di (6° CD, (On), 

此 处 D869 Vn.-09. 而 


C- (ws om 一 二 深部 |, ton), 


由 各 为 8 的 相合 估计 及 logZ(g) 三 阶 偏 导数 的 存在 性 ， 知 
Pu(euG 一 四 = 对 任何 让 和 二 …， 名 当 n->oo， 再 由 当 
0 一 oo 时 ，Du 人 go) 的 极限 分 布 存 在 可 知 ， 
Drip (eu (n) ) ws DalOo) -全 >0. 
再 由 大 数 定律 知 以 概率 为 工地 有 
mu- 一 本 [aog 10) 


26.36， ] = ruden)， 
log L(OW) 一 log 工 (00 ~£— 5 Dr(OOT (9°) D.(0®) 


= 


= VO (0) Vl0). (8.6.8) 
完全 同样 的 方式 得 到 
log Pi (pw) 一 lg 工作 0 一 一 于 DOF (mpo)， 


a 


下 人 8 log P(g) 8 log T.(p 
Up) = Ce 2 3 )=BW,), 


故 得 

lg Yo — bog Yo0) 一 一 二 V5(0°) B"I-! 9") BV (0. 
由 此 式 受 避 .6.9 ,得 

于 了 一 lg 工场 J 一 iogZ(G ~ (og LO —log L(6)) 


~(log 这 人 — log Tg) Vir(Oo) TFT (0 
—B'i: (9g) BP) V, C0) /2 
» (0) Eh —I1 (8°) Bri Cp) BI (0)] Wn (O°) /2, 
此 处 栈 .(g0 = 瑟 (69) 了 -12(69), 而 上 为 上 阶 单位 阵 . 


由 也 (po -> WO ICO00) 知 印 (909) 一 >W(0, 大， 因 
此 当 % 一 co 时 , 了 。 之 极限 分 布 与 Z'GZ 同 ， 其 中 2Z~ 和 NO0, )， 
而 

G= HT (0) Prl: (gp) BIV*(0). 
注意 到 了 (oo) 一 BI(9) B', 易 见 人 一 G, 即 他 为 徘 等 的 ， 而 (用 
rtAB) ~tr(BA)) 

rk(G) =tr(G) =k— Te 

一 此 一 这 [站 (po BI(O) B= = —*. 
因此 , 由 x* 分布 的 人 性质 g 知 屯 BZ 一 全 -这 就 证 明了 本 定理 , 

这 个 定理 与 点 估计 理论 中 的 定理 2.6.6' 相 成 . 与 极 大 似 然 佑 
社 一 样 , 似 然 比 检验 也 常用 于 样本 不 是 独立 同 分 布 的 情况 。 因此 
自然 要 间 : 在 这 些 更 一 般 的 情况 下 定理 8.6.1 前 结论 是 否 仍 成 
立 ? 不 难看 出 : 关键 在 于 似 拨 方 丢 的 根 具有 类 似 于 定理 2.6.6' 的 
性 质 ， 且 密度 函数 (wy, …, ws 全 要 满足 一 定 的 条 件 ， 合 对 


(人 只 荆 ，…， 298 了 多维 中 心 极限 定理 可 用 ， 在 一 个 简单 而 
. 1 ws 


有 用 的 场合 , 中 样本 是 由 若干 有限) 个 i 记 . 样本 组 成 的 情况 ,不 难 
证 明定 理 的 结论 成 立 . 因为 据 以 证 明 这 定理 的 定理 3.6.6 在 这 个 


200» 


ee -9 一 ra 


情 癌 下 成 立 . 

另外 述 可 以 提出 在 零 候 设 不 成立 时 似 樵 比 的 极限 分 布 间 题 
述 问 题 在 文献 中 有 一 些 讨 论 , 在 此 不 准备 细 述 ,只 提 到 这 样 一 个 结 
果 : 车 将 零 慑 设 表 为 (8.6 . 轧 的 形状 ， 取 一 申 对 立 假设 中 的 点 
{0 这 里 旬 ,…， 9 因 定 击 limVn 一 


和 4 二 hy 刚 在 定 再 3.6.1 的 条 件 下 (包括 0 … 的 

, 0) 为 名 的 内 点 这 一 假定 )， 由 (3.6.7) 定 义 的 了 了, 在 参数 为 
Co, 9,，081，…，049) 时 的 分 布 , 当 m-> co 时 , 收 伍 于 烧 -1.6 
其 中 8 一 WICO0 Rh 而 及 = Corrs Be)' Oo= (1, 1 Oh, 
0 …， 0 TOO = (Ty 00), 6% j=r+l, 有， 

Wald (1943) 和 Rao (1948) 分 别 引 进 了 与 统计 量 了 ， 类 似 的 
统计 量 ， 如 果 将 Ba 写 为 (3.6. 四 的 形状 , 草 他 们 的 统计 量 有 很 醒 
目的 形式 : 

Wald: W,.=D', I D., 

Rao: BR, Vhs 0°) We. 
其 中 人 为 (0641, …，92)' 的 极 大 似 然 估 计 , 了 "C0) 的 定义 已 在 前 
面 给 出 Dw 一 Vn6%, ;为 在 限制 =*…= 扩 一 0 时 (六 
0) 的 极 大 似 然 估计 , I; 为 在 同一 限制 下 G04，…， 9) 的 Fisher 信 
息 阵 , 而 态 ,= (Vi …， Vw), 其 中 

1 昌 Iog 了 人 ,Wh, 0, | 
7 一 - i) = 


很 容易 证 明 ， 在 与 定理 3.6.1 同样 的 条 件 下 , 有 
机 -了 2 Rn -了 > 旭 _ -， 当 部 一 ceo. 

证 明 只 用 到 定理 8.6.1 的 证 明 的 推理 的 一 部 分 ， 我 们 把 它 留 给 读 
者 自己 去 完成 . 

现在 回 到 定理 3.6.1. 由 这 定理 可 以 提出 如 下 的 大 样本 似 然 
比 检验 ， 
1， 当 了 2 欢 --( 四 ， 
9 Zoo yn 


$308 


在 定理 的 条 件 下 ， 对 充分 大 的 "此 检验 的 水 平 近似 地 为 a， 我们 
注意 ， 定 理 3.6.1 只 是 在 Bx 为 降 维 的 情况 才 适 用 ， 因此 ， 象 在 
总 体 访 (a, oa) 中 检验 aav 这 类 问题 , 这 定理 就 不 能 用 . 

当 员 财 定 时 ,了 。 之 分 布 与 其 极限 分 布 内 -, 会 有 差距 . 有 的 作 
者 提出 ， 为 使 通 近 的 程度 改善 一 些 ， 可 以 用 一 个 常数 乘 了， 以 
使 其 均 信 与 极限 分 布 你- 的 均值 站 一 ” 尽 可 能 接近 ， 不 涉及 这 问 
题 的 一 般 讨 论 , 我 们 举 一 个 例子 来 说 明 这 个 想法 . 

全 3.6.2. 设 到 ia …， 下 wm 为 自 训 (my，oD 中 取出 的 iid. 群 


本 ， 61， … 本 且 全 体 % 一 总 各 个 Yg 独立 ， 要 检验 假设 
H: oo 
这 显然 相当 于 定理 的 "+1 的 情况 ,不 难 算出 


exp (去 oh Se, 
其 中 如 -天 六 (下 95 59~ 训 mS/n, 
设 刀 成 立 ， 以 o 记 方 郑 之 公共 从 则 m8 /20* 服 从 参数 为 
Go 一 芒 /2 的 Gamma 分 布 (有 密度 7 ma- FI 可 owl 


>0), 因 之 m83/207 服从 参数 为 25 上 的 Gamma 分布， 然而 ,对 
任何 4>0 及 一 个 名 参数 的 Gamma 分 布 变 量 了 Z， 有 


Ellog(@@X)] = Ty 站 | log a .ewe-1d% 


-loge+ fs; og T (9) 
-1 1 ,ofl 
log a+lopgp 3p 2 +0( 去 ). 
因此 对 本 例 而 言 , 当 零 假说 互 成 立时 , 有 
(了 -nd 2 了 -二 


ee 


sodal. 


#1 


-+0( 训 )】 
~n [ug(- 和 -二 BD +0( 志 并 
- 蚊 m， [ee 人- 过)- 二 
-sms7+0( 言 )} 

利用 log (1 一 4) ~ 一 4 一 喜 太 +0G ( 当 ]s1 一 0), 经 过 容易 的 计 
算得 出 

El(YH™ (~— D+[ 识 Gr -+ 于 ( 宫 守 - 乞 

人 +0( 直 ) 

其 中 站 =min {m,…, mx}， 把 上 式 右边 前 两 项 之 和 记 为 6, 则 当 
m 都 比较 大 时 , 用 < 了, 代 了 ,可 以 使 均值 更 接近 4 一 1、 如 
用 的 地 的 全 信 计 人 PE 营 or- -其 3 代 本 
DS 人 eA 则 得 到 更 简便 的 结果 实际 上 ， 


nf 

统计 量 
22. 一 之 Te log (9"*/8: 

的 均值 (在 吾 成 立时 ) 为 


BV -D+ nr) tA). 
因此 , 可 将 Z 调整 为 
和 -2 [+ 可 全 二 a5)}- 
而 取 检 验 由 如 下 ， 
$ Ks, x ~{ 


1， 若 > (a), 
0,， 车 如 < 驳 1(0)。 


en 。 
TE cwi 


这 就 是 Bartlatt 在 1987 年 提出 的 检验 ， 

定理 3.6.1 是 在 定理 2.6.6’' 的 正则 条 件 下 建立 的 当 这 些 
正则 条 件 不 成 立时 ,定理 的 结论 也 可 以 不 成 立 . 违反 这 种 正则 性 
条 件 的 最 重要 情况 是 集合 {2: jz 站 之 外 与 9 有关， 我 们 举 一 
个 例子 来 说 明 这 一 点 . 

例 8.6.8. 设 诈 …， 下 "为 自 {如 OO, 人 交 ，6 汪 0} 中 抽出 的 
i. 样本 , 要 检验 假设 豆 : 9 一, go>0 已 知 ， 易 见 


Bup Il FE, #8) 一 {max (XZ, Ty 下 由 


由 此 得 到 LR, 下) = {max (Xi, pv Rn) /Oo}™, 

但 当 吾 成 立时 ，max (及 1，-…， 卫 必 /96 有 密度 函数 mir (对 0<# 
1 在 此 外 为 咏 ， 出 此 不 难 求 出 了 n=2 log LR(X1,…， 入 和 ) 的 
分 布 恰 为 器 . 但 此 处 =1 而 r=0, 故 如 按 定理 3.6.1, 极限 分 布 
应 为 难 ，1956 年 ，Hogg 在 某 些 类 似 的 但 较 一 般 的 情况 下 证 明了 
类 似 的 现象 ， 即 被 限 分 布 仍 为 ”分 布 ， 但 自由 度 为 定理 3.6.1 中 
所 规定 的 数 旭 的 两 偿 . 


《三 ) 似 然 比 检验 的 相合 性 


如 果 当 样本 大 小 无 限 增加 时 ， 一 检验 犯 第 二 种 错误 的 概率 趋 
于 由 则 称 它 为 相合 的 。 这 个 概念 是 Wald 和 Wolfowirz 在 1940 
年 引进 的 . 
定义 3.6.2. 设 对 于 每 个 样本 大 小 确定 了 (8.1. 了 的 -个 
检验 四 4 字 D … 亚 几 以 Br(9) 记 其 功效 函数 ， 如 果 存 在 a<1， 
至 
Hm sup BD <a 对 任何 9EGr， (3.6.9) 


lim fi,(9) 一 1， 对 任何 OEBx. (3.6.10) 


则 称 和 为 3.1. 了 ) 的 一 个 相合 检验 ， | 
这 个 性 质 与 点 估计 理论 中 的 相合 性 是 对 应 的 ， 它 应 该 看 丰 是 
对 任何 检验 的 最 基本 的 要 求 。 我 们 举 一 个 例 于 来 说 明 这 个 概念 . 


例 3.6.4. 设 斑 :时 为 抽 髓 不 (人 吧 中 的 iia. 样 本 ， 
要 检验 假设 互 : = go， 我 们 已 知 , 以 


全 开 -al 二 Ce 


为 否定 域 的 双边 一 样本 # 检 验 是 水 平 a 的 . 此 处 时 。- 工 疡 瑟 ， 


任职 忆 ， 0O<a<l, 及 相关 m 和 和 oa>0. 我 们 知道 ， 当 参数 真人 
为 《aa， oz) 时， 以 概率 为 1 地 有 ， 互 ,一 ga， 旅 Vm | 至。 一 ao]->co， 


且 -二 局 Cr- 立 )* 一 o 故 以 概率 为 工地 有 


Mm 
MV) /YT 


但 to-i (号 ) 一 4m， 后 者 是 由 - 声 |o"dw 一 1 一 各 所定 出 
的 一 个 数 , 由 此 可 知 


Bn (mi, a1) =Pe,o (VEIT ol yy nl > 


1 (2))> 二 ， 当 光一 oo， 


′ 这 证 明了 双边 一 样本 检验 的 相合 性 ， 其 它 一 些 仙子 也 可 以 类 似 地 
证 明 , 我 们 建议 读者 挑 去 一 ,两 个 自己 验证 一 下 

下 面 证 胃 似 然 比 检验 的 相合 性 ， 

定理 8.6.2， 若 定理 2.6.5 和 定理 3.6.1 的 条 件 都 成 立 ， 而 
Br 为 如 的 一 个 闭 子 集 , 则 @@. 工 . 力 的 似 然 比 检验 是 相合 的 . 

证 ， 由 定理 3.6.5 及 定理 3.6.1 的 假定 后 上 的 极 大 似 然 佑 计 
存在 且 为 似 然 方程 的 一 相合 解 ， 由 定理 3.6.1 及 (3.6.9) 中 的 
%<< 工 可 知 ， 当 样本 天 小 呈 增 加 时 ，(3 .6.9 中 的 。 保持 有 界 ， 即 若 
以 6 记 样 本 大 小 为 % 时 的 0 值 ， 则 和 委 m <co 对 一 切 n， 在 取 
"EBzr， 由 于 Ba 为 闭 桌 ， 存 在 es>0 充 分 小 使 以 六 为 中 心 ， 
8 为 半径 的 闭 球 上 8 与 Bz 无 公共 点 ， 依 Wald 定理 2.6.5 的 
Wolfowitz 注解 , 存在 0<4<1 及 n( ,使 当 %rn(9) 时 ， 

md。 


Po (sup HF (Fs WD /DFR 0 >) < 
此 处 5>0 事先 给 定 , 由 于 8 门 Bx 为 空 集 , 有 
网 让 /cc /pple 
> f(x 0) /snp fFs 9)， 
从 而 当 n>n(W) 时 ,有 
Po (LR(XY, + RO > )>1—%. 


取 和 w 之 RC) 充分 大 , 致 1d-" >9， 则 旺 殉 当 %> 人 时 ,有 
Po (LRORY, 7, Ha 0) >1—, 
这 说 明 
Br 这 1 一 各 当 nm 

这 里 5。 为 样本 大 小 mn 时 似 热 比 检 验 的 功效 函数 ， 这 证 明了 
(3.6,10) ,因而 证 明了 本 定理 . 

可 以 证 明 ， 邵 果 似 然 比 接 介 .6. 介 定义, 则 在 定理 3.6,1 的 条 
件 下 , 似 然 比 检 验 的 相合 性 也 成 立 . 


(四 ) 区 点 注 记 

关于 仆 然 比 榨 验 的 一 般 理论 , 我 们 就 介绍 这 些 ， 在 结束 这 一 
节 以 前 再 提出 几 点 有 关 的 事实 ， 

1. 似 然 出 检验 的 功效 . 要 精确 计算 似 然 比 检验 的 功效 ， 当 然 
需要 知道 似 然 比 的 分 布 ， 而 这 一 般 是 难于 求 出 的 .然而 , 利用 (二 ) 
中 提 到 的 关于 在 对 立 假 设 下 羽 然 比 的 被 限 分 布 ， 可 对 功效 值 给 予 
一 个 近似 的 信 计 .。 

将 芍 假 设 写 为 (3.6. 国 的 形状 ， 列 如 在 (二 ) 中 指出 的 ， 当 定理 
3.6.1 的 条 件 适合 而 9 一 ( 9 …， 9 全 <] 时 ， 了 。 近 
似 地 服从 非 中 心 2 分布 三 -i,a， 其 中 部 = 可 Z(Go) 有 其 中 
有 = (4 而 


‘wa: 


了 人 = Ca， 页 j="r+1, ,DD, 
Oo = (外 ， ty 六 ， 0, ”3 0 可 
对 任 一 CB, ny 0 EE | 吧 ) 7 一 旋 可 以 将 其 写成 为 


(2 0 入 革 ，… 人 ) 的 形状 , 其 中 hh 一 VR + 

EO NV 
…, &。， 这 样 可 以 按 上 述 公式 算出 非 中 心 参数 8 可 以 在 计算 时 以 
To (0) 代 半 rm (go 、 这 样 近似 地 得 到 

B(0) = 已 (天 > 大， 四) 

这 里 B.C9) 为 样本 大 小 为 上 时 ， 渐 近 水 平 为 “的 仆 然 比 检验 的 功 
效 函数 。 注意 到 当 6E Gz 国定 而 %n 一 oo 时 ， 有 六 一 co， 以 及 对 
任何 固定 的 。 有 


lim Pi 0) -1 


可 以 得 到 前 面 指 出 过 的 事实 , 即 在 定理 3.6.1 的 条 件 下 , 车 似 然 出 
按 (3.6.6) 定 义 , 则 似 然 比 检验 有 相合 性 ， 但 是 , 在 6 固定 时 关于 
了 服从 非 中 心 好 分 布 的 推理 是 不 精确 的 ， 因 而 这 不 能 构成 关于 
上 述 相合 性 的 严格 证 明 - 

2、 似 然 比 检验 与 无 偏 性 ， 从 似 然 比 检验 的 相合 性 可 知 , 当 样 
本 大 小 很 大 时 ， 似 然 比 答 验 是 近似 地 无 偏 的 ， 这 种 “ 渐 近 无 偏 性 ” 
是 任何 相合 窒 验 都 有 的 性 质 ， 然 而 , 对 固定 的 样本 大 小 而 言 , 似 然 
比 检验 可 以 不 是 无 偏 的 . z 

例 3.6.5. 设 下 …, 孚 ,是 从 总 体 术 (a, 0) 中 抽出 的 iid. 
样本 , 要 检验 假设 

H: oi~oiey KE: oro, (3.6.11) 
不 难 算 出 僻 然 比 为 (S* 一 工 启 ( 工 , 一 三 )3 ) 


LR(X ,», ZO) "(SO)" ep [~ 全 备 -DD]. 


显然 , 它 与 (~”】 ”只 相差 一 常数 售 数 ,又 
j=/~ 民 4， 当 瑟 成 立时 ， 
函数 xo (ze>0) 先 增 后 降 ， 因 此 ，(3.6.11) 的 水 平 a 的 似 然 比 检 
= 386 。 


验 有 否定 域 
人 tg 或 过 他 . (3.6.12) 
此 处 8,5 由 方程 | 
Px ed) ti PO) 一 上 (3.6.18) 
de dn be tis 

斯 决定 . 

但 在 例 3.3.6 中 已 证 明 : (3.6.1D 的 水 平 & 的 UMPU 检验 有 
省 定 域 好 fy， 或 六), 其 中 本 和 页 由 方程 组 (网 (人 .3.65)， 
(8.3.66)) 


了 (1 全 ) +1— Po dh)=a. 
1 (3.6.14) 


如 本 


{Hm—Ay 一 
缚 1 3 站 一 四 /全 一 有 2 


所 决定 . 不 难看 出 , 除非 a=1, 这 两 个 方程 组 的 解 必然 不 同 。 实 际 
上 ;车 8= 击 且 8= 嫩 , 则 有 
(GT D3 人 obD/a6m4/ 的 
一 【Be-2m mi (Ba 

因而 6 一 ev 即 5 一 Gd， 由 3.6.19) 的 第 一 式 得 a=1， 所 以 当 
ea< 工 时 , (3.6.12) 与 UMPU 检验 的 否定 域 不 一 样 . 这 就 证 明了 ; 
以 43.6.12) 为 桨 定 域 的 似 然 比 检验 不 能 是 无 偏 的 . 因为 , 若 它 是 
元 偏 的 , 则 如 定理 3.3.5 所 证 , 具有 每 {3.6.13) 那样 的 否定 域 的 无 
偏 检验 必然 是 UMPU 检验 而 由 UMPU 检验 的 唯一 性 ， 将 有 
= 二 本 而 我 们 已 证 明 ， 这 是 不 可 能 的 (这 个 事实 也 可 以 很 
区 直接 证 明 而 不 必 依 赖 UMPU 检验 的 唯一 性 , 我 们 把 它 作为 练习 
留 给 读者 ). 

3， 似 然 比 检 验 在 直观 上 看 是 有 根据 的 , 在 具体 问题 上 党 给 出 
具有 和 良好 性 质 的 检验 ， 而 且 从 理论 上 也 可 证 明 它 具有 某 些 辫 好 药 
大 样本 性 质 ， 但 是 ， 在 个 别 特殊 情况 下 它 可 以 给 出 很 坏 的 结果 . 
下 面 的 例子 是 Stein 给 册 的 . 

例 3.6.6. 变量 也 的 样本 空间 包含 五 个 点 0, 土 I， 土 2, 其 分 
布 族 为 


全 


P(X-0) =0 了 , PR=1)=P,(T= 1) 


PeatX=D 00, PalF=——2) -hl 6), 
四 = 要 一 (Oy OY 人 而 0 志趣 1}. 


这 里 0<a< 吉 ,a 为 一 给 定 的 已 知 数 , 考 虐 检 验 问 是 
于 :各 ww 0 一 于， 


不 难 直 接 算出 
LR (x) 一 np P(e=0) /Ps¥ (X=¢) 


_ 1 1 1 
1~a ‘ta 1a’ 2， 2, 分别 当 工 三 们 ， 土 1， +2. 


于 基 水 平 “ 的 似 然 外 检验 的 和 否定 域 包含 土 2 这 两 个 点 ， 其 功效 函 
数 等 于 名， 由 于 负 魏 m 这 个 检验 比 不 作 尾 何 试验 径 取 市 人) 至 c 
还 不 如 . 


$3.7. 序 贯 检验 


(一 ) 基本 概念 和 例子 


用 序 黄 方法 去 检验 一 个 假设 的 目的 ， 也 和 用 岸 黄 方 法 舍 社 一 
个 参数 一 样 , 无 非 是 由 于 两 个 原因 , 一 是 在 同样 的 可 靠 度 之 下 节省 
试验 次 数 , 一 是 在 不 少 问题 中 , 为 达到 一 定 的 可 靠 度 ， 必须 使 用 序 
芙 方 法 .这 里 所 谓 “ 可 靠 度 ” 可 以 从 检验 的 功效 这 个 角度 去 理解 ， 
一 个 典型 的 例子 是 .从 一 六 找 产 品 中 抽取 若干 个 以 检验 “ 族 品 率 
不 超过 0.03” 这 个 候 设 ， 指定 检验 的 水 平 为 0.05, 而 我 们 要 求 在 
废品 率 超过 0.1 时 , 检验 的 功效 不 小 于 0.8， 就 是 说 ,在 废品 率 超 
过 0.1 时 ,有 30% 以 上 的 “可 合 福 "将 它 检验 出 来 ， 

和 序 贯 点 估计 的 情况 一 样 ， 一 个 序 货 检验 由 停止 法 网 和 检验 
法 则 这 两 部 分 构成 ， 停止 法 出 告诉 我 们 何 时 停止 抽样 ,检验 法 则 
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告诉 我 们 , 在 停止 抽样 后 , 怎样 根据 已 抽 得 的 祥 本 去 决定 是 否 接 受 
假设 ， 在 2.7 (一 ) 中 提 到 的 产品 验收 中 的 Dagus-Romig 复式 
抽样 方案 就 是 序 贯 检验 的 早期 的 重要 例子 。 下 面 我 们 再 考察 几 
个 例子 , 并 借 此 说 明 用 个 有 关 的 概念 - 
例 3.7.1. 设 一 大 批 产品 的 废品 率 为 m 要 检验 假设 
H: pp KE: p> po, 
考虑 这 样 的 检验 $: 先 界 定 一 个 自然 数 %，、 每 次 抽出 一 个 产品 . 
车 扫 到 不 超过 mn 个 时 碰 到 一 个 废品 , 唱 抽 样 停止 , 且 否 定 互 . 若 抽 
到 第 m 个 时 尚未 发 现 度 品 , 则 停止 抽样 且 接 受 妃 . 
关于 这 个 检验 可 以 提出 下 面 两 个 问题 
1. 平均 需要 摘 样 多 少 次 ? 以 记 所 需 搞 样 次 数 ， 是 一 个 
随机 变量 , 这 正 是 序 芙 方法 的 特征 ， 易 见 
PN-B = Dp, =1, , m~li 
PN-m) = (i—p™, 
这 就 是 变量 思 的 概率 分 布 。 由 之 算出 
BNW) -总 kpN -DD 


Eo(N) 称 为 "平均 抽样 次 数 ”(Average Sample Number, 简 记 
为 ABN)., 
2. 假设 喜 被 接受 的 概率 有 多 大 ? 将 这 概率 记 为 丘 (z， 显 然 
有 . 
KE(D= DD"™. 
当然 , 1 一 下 (9) 就 是 这 检验 的 功效 函数 好 和， 然而 对 产品 验收 
而 言 ， 常 取 接 受 假设 的 概率 作为 其 一 个 基本 特征 ,并 称 之 为 “操作 
特征 函数 ”(Operating Gharaoteristic Funotion, 简称 OG 函数 )， 
以 上 这 两 个 沙 数 ， ASN 有 DG 或 功效 函数 ), 是 刻 划 一 个 序 鞭 
检验 的 两 个 基本 量 , 考虑 ASN 意味 着 将 每 次 试验 的 费用 看 作 一 个 
常数 。 自然 ， 象 本 例 这 样 ，ASN 和 00 孝 轻 而 易 举 地 精确 算出 的 
情况 , 是 极为 希 有 的 . 
在 本 例 中 来 用 序 贯 抽样 的 和 月 的 当然 在 于 节省 抽样 次 数 . 因为 ， 


= BD" 


如 果 一 次 抽出 和 m 个 并 控 同 料 的 规则 决定 是 否 接受 豆 ， 划 得 到 一 个 
固定 样本 检验 ， 其 OC 函 数 与 上 述 序 贯 检 验 的 OO 函数 完全 一 致 ， 
但 显然 用 序 黄 方 法 抽样 的 平均 次 数 要 少 些 . 
例 8.7.23. 本 例 说 明 , 有 时 为 了 达到 一 定 的 可 靠 度 ， 非 使 用 序 
贰 抽样 不 可 。 
设 下 …， 玉 ,为 自 正 访 总 体 不 (ae，o9) 中 抽出 的 得 .样本 ， 
层 检 验 假设 
Hiu=00 Ei:ar (3.7,1) 
检验 的 水 平定 为 a(0<a<1), 且 要 求 ， 当 |a| zz 时 ,检验 的 功效 
不 小 于 有 这 里 8>0, a<8<1 是 事先 指定 的 两 个 数 ， 这 表示 ， 
当真 实情 况 与 零 假设 的 偏差 达到 4 这 么 大 时 ， 要 求 至 少 能 用 有 8 这 
人 委 大 的 概率 发 现 出 来 . 
现在 我 们 证 明 ， 不 论 % 多 大 , 如 果 事 先 固定 只 许 抽样 nm 次, 这 
个 和 要求 元 法 实现 .事实 上 , 取 对 立 假 设 内 的 点 (4, o1)， 考 虚 检 验 
问题 
H':w=0, o-oo 下 /一 到 GT dy, 
因为 互 ** 区 的 水 平 & 检验 必 为 耳 ' 必 区 ' 的 水 平 g 检 验 ， 可 知 , 
鼠 *> 五 的 任 一 水 平 & 检验 吕 的 功效 函数 在 点 (wy, oy) 外 之 值 ， 将 
不 超过 五"*> 天 "的 水 平 x 的 最 优 检 验 的 功效 。 依 Neyman- 
Pearson 基本 引 理 ， 拷 出 吾 '<> 五 ' 的 水 他 的 最 优 检 验 有 否定 域 
{信之 gizof MMW}, 其 功效 为 
Ps ol >/ NR) m1- Sa Vn /os). 
涯 ”固定 而 oa 一 ce 峙 ， 上 式 右 边 有 极限 1 一 更 (xu) =a， 因 此 , 无 
论 s 儿 大， 使 功效 在 la| >a 时 处 处 不 小 于 B>a 的 委 求 ， 是 无 法 
实现 的 。 . 
然而 ,在 下 一 章 ( 见 $4. 引 中 我 们 将 讨论 Btein 的 两 阶段 抽样 ， 
由 之 可 作出 一 个 长 度 等 于 事先 指定 的 工 而 依赖 于 样本 4 的 区 间 
[Gi (wvw)， Gs(w)]， 使 对 任何 (9, 0) 有 
了 一 一 (3.7.2) 
0<“ <1, a 任意 指定 。 由 此 不 难 作出 (83.7.1) 的 一 个 检验 , 满足 
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a 


上 面 记 提 的 要 求 。 实 际 上 , 取 ( 人 .7 .多 中 前 a/ 一 mintw, 工 一 局 ,了 荫 
=G/2， 得 到 而 (2), dtw) 后 , 作 检 验 如 下 ; 当 负 (所 0&dy(2) 
接受 及 ,不然 就 否定 囊 ， 这 时 
了 Po 。 (接受 囊 ) 一 Po oA) Od (XT)) =1—aml—a. 
故 检 验 有 水 平 x。 又 因 五 = 友人 ) 一 而 2) =B/2,， 有 
{2:0€E [th te), da (01D [G(s asds tt)]。 

对 任何 &,|a| 守 Gd、 所 以 对 这 样 的 a 有 

Po so (否定 HH ) = 了 Ps oc (OE T(E), d(T}]) 

Po {h(a -1—w>B, 

这 证 明了 所 要 结果 , 


{ 二 y 序 贯 概 率 比 检 验 (Sequential Probability Ratio Test, 简 
称 SPR'TY 


序 贯 概率 比 检验 是 Wald 在 四 干 年 代 发 展 起 来 的 ， 并 总 结 在 
他 的 著作 <Sequential 上 naIysisy (J. Wiley, 1947} 中 ， 自 那 时 以 
来 , 一 些 统计 学 者 在 这 方面 继续 作 了 不 少 工 作 . 

我 们 先 就 一 个 简单 情况 来 说 明 这 个 方法 . 设 变 量 工 在 假设 瑟 
下 的 分 布 为 万 (mgr(o)， 在 对 立 假 设 四 之 下 的 分 布 为 C(x)adx 
{ 工 ) ,要 检验 五 二天. 

设 下 1， 互 至 为 号 的 iid. 样 本 ， 如 果 样 本 天 小 思 
固定 , 则 由 Neyman-Pearson 基本 引 理 , 水 平 # 的 最 优 检验 为 算 
卉 比值 


BT», ZH FZ /HFoXI, (3.7.3) 


定 出 一 个 适当 的 %。。 当 及 >o 时 ,否定 吾 ， 当 <e 时 , 接受 互 。 
Wald 的 想法 在 于 ， 若 比值 Bs 在 6 的 附近 , 则 无 论 作 出 接受 
或 天 定 吾 的 决定 , 都 显得 比较 勉强 , 因此 比较 自然 的 作法 是 ， 定 出 
两 个 数 4 吾 ，4<B， 使 当 如 加 B 时 省 定 吾 ， 当 妃 所 4 时 接受 
豆 ， 而 当 4<< 品 < 吾 时 则 不 作 决 定 而 继续 抽样 一 次 ， 得 于 mts 后 ， 
按 (3.7.3) 算出 电工 st 站。 车 妃 H 五 或 云 册 


Le 


一 一 一 一 
a 


赠 作 出 相应 的 决定 ， 否 则 继续 抽样 一 次 ， 直 到 作出 决定 为 止 ， 这 
就 是 Wald 所 引进 的 SPRT. 
出 3.7,3. 考 虐 一 个 简单 例子， 即 久 在 候 设 了 和 下 之 下 分 别 
有 分 布防 (0, 坊 和 轴 (1, 才 的 情况 , 这 时 有 
RC 这]1, ry 了 ,) 一 -w+ 内 名 一 十 ， 2, ”3 
不 等 式 4 二 <<B 等 价 于 
log 4+ 人 < 闪 卫 ,<log B+ 各， n=1, 2, -3.7.4) 


因此 本 问题 的 SPRT 好 绪 为 : 每 次 观察 一 个 去 ， 《 按 昼 .， 下 “ 
的 次 序 排 ), 只 要 3.7 .多 还 满足 , 则 继续 观察 下 一 个 五,， 直到 对 


某 个 mo，(8.7. 鸭 不 满足 为 止 ， 然 后 根据 疡 下 ,>log B+ 各 或 < 
log 4 十 瑟 ， 以 决定 是 否定 还 是 接受 五 。 界 限 4，B 的 选 定 是 依据 


使 检验 具有 一 定 的 性 质 的 要 求 , 例如 , 要求 犯 第 一 、 第 二 两 种 错误 
的 概率 ,分别 不 超过 a 和 8. | 

本 例 中 ， 问 题 的 更 自然 的 提 法 度 当 是 考 嵌 正 态 分 布 族 {NX (@， 
D1， 一 oo<8<o0}, 把 0, 1 和 看 作 是 8 的 两 个 可 能 值 。 在 这 种 情况 
下 , 孤立 地 考虑 检验 问题 9~0<>0 一 1 意义 不 大 . 更 自然 的 是 考虑 
象 2 和 如 这 样 的 假设 。， 根据 8 3,2, 我 们 可 以 先 担 出 检验 问题 
中 一 页 这 0 一 让 (这 里 负 沁 60), 而 希望 这 个 问题 的 最 优 检验 对 于 原 
来 的 检验 问题 ( 副 0<p 如 sg>bo) 也 有 某 种 其 优 性 、 为 此 重要 的 
一 点 是 ， 问 题 6= 弛 中 9 一 抽 的 水 平 a 最 优 检 验 ,对 于 原来 的 榨 验 
问题 仍 有 水 平 s。， 对 上 述 正 访 总体 均 秆 的 检 验 问题 而 言 ， 在 固定 
伞 本 之 下 记述 事 实 是 成 立 的 .以 下 我 们 将 证 明 ， 这 对 SPRT 也 成 
并 ， 

定理 3.7.1. 设 变 量 王 的 分 布 族 为 ( 儿 ， 8% fo(2) dp (4)， 
0E€), 为 直线 上 的 一 个 区 间 . 假定 {fw)} 为 关于 统计 量 工 (%) 
的 单调 修 然 比 族 ( 品 定理 8.3.2 前 面 的 说 明 )， 任 取 昌 中 的 两 点 
如 病 ,Bo 二 抽 ， 则 检验 问题 

= = 


+ Hd 


的 任 一 SPRT 的 功效 函数 B{ 四 为 8 的 非 降 透 数 . 

定理 的 证 明基 于 下 面 儿 个 引 理 . 

引 理 .7.1. 在 定理 的 假定 下 , 若 以 

{7 Bs, gol aap h), HEC} 

记 工 (wm) 的 分 布 族 , 则 它 为 关于 的 单调 似 然 比 族 (此 处 (了 F, 绍 5) 
汶 荆 的 样本 空间 , 所 为 上 在 乡 z 上 的 导出 测度 )、 

证 ， 枉 取 合 中 两 点 册 ，b 各 之 二 ， 记 

Fo lw) = Fo 0 BTW)). 

下 为 单调 非 降 函数 ， 设 由 众 为 任 一 有 界 且 零 一 可 测 的 画 数 ， 根 据 
引 理 1.3.2, 有 


J, $90 Dap = | BT C0)) Fao) do) 
DO A 


LOLAGLPIOR 
由 中 的 任意 性 知 
yo Ct) 一 下 (的 8 从 (9 a, wT). 
这 说 明 ，gof 旭 /go( 信 为 1 的 单调 非 降 函 数 ( 即 加 提 ), 这 证 明了 了 引 
理 3.7.1, 
引 理 8.7.2. 设 工 的 密度 族 {fo 人 duntzm), 8EB} 为 关于 w 
的 单调 似 撼 比 族 , 以 记 记 焉 的 分 布 函 数 , 则 
Fatwm) 32 下 so) 对 尾 何 页 和 让 及 一 co< 和 <ccy 
又 车 OF (4%) <1， 网 也。 (2) 人) 。 
A= {2: ful >Fo ts}, =up A 
B= {w: fn(®) <Fn lm)}, b=infB. 
则 由 引 理 假定 知 a 拟 5， 显 热 


[fal®) fo ap—|, Fel) —fa (0)) dp. 
性 取 Toy oo0, 车 加 所 如 则 


号 4 了 


Poa leo) — Poleo) = | Ufa (eo) fo le) lar>0. 
因 在 (一 %%， wol 内 有 fo, (2) > fe, (%) . 车 zo b, 则 
Fo lao) — Faleo) =| (fa lw) —falo) dp 


fi Fol fa 0 dp 
由 于 在 吾 内 有 fa)> 扩 (9)， 有 
Foleo) ~ Pakao) >|, Fale) fa (odp 


+ falo) ~fa (2))ap =0, 
这 证 明了 引 理 的 前 半 ， 注 意 冯 在 单调 似 然 比 族 的 定义 中 ， 要 求 
Ps 和 Fe 当 册 关 9， 仔细 检查 上 述 证 明 易 见 引 理 的 后 一 结论 成 
立 。 引 理 证 毕 ， 

引 理 8.7.8. 设 (4) 和 也 。(w) 为 两 个 一 维 分 布 函 数 ，Fi(w) 
沁 了 zw) 对 一 切 w， 则 存在 随机 变量 六 及 两 个 非 降落 数 六 (ay 利 
f200), 致 及 (0) 所 fo(9) 对 一 切 v 且 天 (FV) 的 分 布 函数 为 了 
=，2. 

证 . 定 关 (9) =inf 直人 一 四 I Fm)}, $=l1, 2,. 
0<o<1, 显然 及 fo 都 是 非 降 函 数 , 且 二 ( 仿 气 foto)， 叉 

FP) Sr, (Fa 对 一 切 2, t=1, 2. 
第 一 式 显然 , 第 二 式 证 明 如 下 ， 在 集合 
{EPOD oP DN} 
中 取 一 串 点 信 } 致 各.(2)， 则 由 了 的 右 连 续 性 知 了 (fs(2)) 
~lim F,(1s) ,但 由 志 的 定义 知 了 ,tw) 之 % 对 一 切 % 故 也 (fi(9)) 
守 x， 出 此 可 知 
YE 3 EFAR DD) Ep; 
FD Er FPA) SF) YE FD, 
即 y 所 (8@) 全 万 的 委 2s。 以 严 记 (0, 内 内 的 均匀 分布 变量 , 则 
P{f TY Sw} = PI E&F} = FWY, $=1, 2, 


引 理 还 尝 ， 

现在 转 到 定理 名 ,? ,1 的 证 明 . 

记 2 一 Jog [fs Ct) /fe (0 ] 一 有 (TD C=1，2，"…*， 此 处 殊 为 
非 降 画 数 , 由 引 理 3.7.4, 了 (w) 的 分 布 艾 为 单调 似 然 出 族 . 由 引 理 
3.7.2 及 8.7.8, 人知 卫 的 分 布 耳 数 oo 人 有 与 加 (请 的 分 布 函 数 同 ， 
此 处 下 一 总 轧 ， 扩 全 为 的 非 降 函数 ， 且 ga《 引 记 gt9)， 当 
纪 > 反对 任何 将 点 


(% 访 )-(% 宫 er ) 
标 在 直角 坐标 村 ROS 中 ,并 将 各 点 用 直线 段 连接 起 来 , 则 
但 一 友 被 否定 } = {此 折线 第 一 次 从 上 方 


越 出 带 形 1og 4<S<log 8B}. 
现在 尾 取 站 ,后 , 站 < 出 


BC0") =Por | 折线 人 (加 容 hGgm(7)))) 第 一 次 从 上 方 


越 出 上 述 带 形 |. 

将 上 式 中 的 2" 改 为 得 另 一 等 式 ， 由 于 ger( 下 之 gu(V) 及 
降 , 显然 , 当 折 线 必 高 ha))| 第 一 次 从 上 方 对 出 上 述 带 
形 时 ,折线 长 mw 高 hgo(V)))| 必 第 一 次 从 上 方 越 出 上 述 带 形 ， 
这 就 证 明了 BC9") >>B(97 ， 定 理 证 毕 . 

根据 这 个 定理 , 在 单调 似 然 比 族 (其 中 包括 单 参数 指数 族 ) 中 ， 
用 SPRT 可 得 到 单 边 假设 的 水 平 为 的 序 贯 检验 ， 

(三 )SPRT 的 封闭 性 


任何 一 个 序 贯 判决 函数 所 必须 满足 的 条 件 是 ， 它 要 以 概率 为 
1 在 经 过 有 限 次 试验 后 停止 , 这 个 性 质 巴 封闭 性 , 本 笑 的 目的 是 证 


”有明 BPRT 具有 这 个 性 质 . 


定 更 全 .了 .2。 设 羡 的 分 布 族 为 {jot op (2), 8E 昌 }, 在 日 中 
es 


取 两 点 鲍 , Bp， 设 至 4， 三 到 mW 为 下 的 误 , 样本 , 中 为 
检验 问题 

Ho=-0*r 下 :0 一 办 
的 EBT 恨 定 


1 不 等 式 4< 直 falm) /让 fa(m) < 的 界限 满足 条 御 
A<I<B. | 
2° Pef fo lI) /fal) =1}<1， 对 任何 8E8. 
以 太 记 试 验 停止 时 已 做 的 试验 次 数 , 则 
P(N<oo) 一 1， 对 任何 8E@. (8.7. 辣 
证 . 记 s=1lopg 4,， b=]og B， 出 &< 之 0<5， 记 6=5 一 %， 我 们 
证 明 ， 存 在 7” 充分 大 , 至 
Pel B14 tt Zr] 0 =Pp<1, (3.7.6) 
事实 上 ,车 可 (2 和 一 oo， 则 "一 最 然 适合 要 求 ， 著 如 (2Z9 一 02 
<co 则 当 o?=0 时 , 由 假定 2° 知 必 有 Bol22) 一 4 和 0， 这 时 只 和 需 
取 7T 致 "ja 之 # 即 可 ;着 中 >0, 则 由 中 心 极 归 定 理 知 
P|Zs++ Z| 0) -0 (ee) 


FT T 


)+00 =00), ro0. 
Tr 


此 处 0 改 示 一 个 随 了 一 ce 而 趋 于 0 的 量 。 这 证 明了 当 7 充分 
大 时 侣 .人 .合成 六。 因此 由 4 之 0<8 知 
{NN>mer} — {2Zy 十 Ga pe L129 
| 十 如 mr 都 在 Cu，5) 内 } 
SCS{l2t +2 | 0, 2 十 … 十 各 ar| 0, 7 | Bm tr 
十 和 十 也 < 扫 时 . 


-gs (- o Mro 
了 


因此 
PN>mr Ep m0, (3.7.7) 
这 显然 证 明了 定理 3.7.2. 


和 


TT WHW = 


收 仇 具有 指 获 级 的 速度 .由 此 不 难 和 证明 六 的 任意 阶 乍 都 存在 , 我 
们 把 这 一 点 的 证 明 留 给 读者 . 


《四 })SPBT 的 界限 的 确定 
考虑 检验 问题 
召 : 玉 有 密度 folw) 全 五 :三 育 密度 广 (o)， 
王 1， 瑟 o 为 互 的 ii 样本 ,SPRT 由 不 等 式 
上 < 下 mA oo, HEB (3.7.8) 
确定 ， 此 处 fo (Xs …， X) =I FX, i=0, 4， 我 们 着 望 适 
当地 确定 (3.7. 信 中 的 界限 4，B,， 使 这 BPRT 的 水 平 为 ao, 而 当 
玉成 立时 其 功效 为 1 一 BB， 这 里 9m 过 1, 0<Bo<lt， 记 
Ss {m= Ci, Tyy “0) ‘AFD (mr Uy EA (mm, "yp ws) <B, 
d=, 0 hl, Fw oe, Ba) AO (8, ,tn) > BY. 
以 ow 记 当 于 成 立时 , 互 被 否定 的 概率 , 则 


m= BJ fe Ap Co) dp (mn) 


< fd) dn 


_1—p 
= 也“. 人 7. 的 


这 里 1 一 Bo 是 当 豆 不 成 立 ( 即 玉成 立 ) 时 , 吾 搜 和 否定 的 报 率 ， 同 样 ， 

若 令 

Sa= {w= (my ma A Cg, 有 
= ,Rl, fe a oy wn) A (1 in) EA}, 

则 


1 一 m=~ 色 | DC 1 tn) pe (1) liv Cn) 
> 二 2 fs LRC Bo. 


G7 10) 
由 《3.7. 积 ，(3.7.10), 得 


B47T " 


pi ee 
re rt et me 


BUI—Bo /oo, A>Bo/(l— a0). (3.7.11) 
注意 在 上 述 推 导 中 已 用 了 定理 3.7.2 (请 读者 自己 明确 在 那里 用 
了 )。，。(3.7.11) 表示 ， 为 了 使 SFERT 有 所 选 定 的 两 种 错误 概率 m 
和 Bo, 界限 4, 五 必须 满足 \3.7 .11). 这 当然 不 足以 确定 并 和 B， 
但 它 启示 我 们 , 作为 一 个 近似 , 不 妨 取 - 

A=—Bo/ (1l—an), B= (1— Bo /oo. (3.7.12) 
我 们 向 ， 如 果 SPBRT 的 界限 值 4， 吾 按 (8.7.1 罗 取 ， 其 两 种 错误 
概率 的 真实 值 m, 与 原来 预定 的 mm， Bo。 有 怎样 的 关系 ? 由 
(3.7.zl) 得 

Bo/ -an) Br (lL—m), (i—Bo)/m Ud— A /m. 
(3.7.1 的 
由 此 可 知 

oo (1— Bo), Bi Bo 圭一 ao). {3.7.14) 
由 于 oo，Bo 通常 都 是 接近 零 的 数 , 由 名 .7.I 知 ， 如 果 界 限 有 ,BB 
按 (3.7.12) 定 , 那么 , 星 则 其 两 种 错误 概率 的 真确 值 m， 记 未 必 即 
为 预定 的 m, Bo 但 不 致 超 出 急 多 ， 同 对 , 由 .7.1 的 不 难 证 明 

t+ 有 sc 十 有 0. (7 .15) 
这 更 进一步 说 明了 we，R: 不 会 超过 预定 的 ao，Bo 太志 ， 唯 一 可 能 
的 较 大 偏 蔗 是 ma， 启 比 预 定 的 mm，Au 低 很 儿 ， 有 理由 相信 这 种 盖 
中 也 不 会 很 显著 ， 对 互 的 分 布 为 

了 (下 一 站 -1—P(lX=-1l)~l1—p 
的 场合 ， 为 检验 Pp 一 0.05<*3p 一 0.17， 指 定 om 一 0.05， Bo=0.10, 
用 近似 公式 (3.7.12) 决定 BPEBT 的 界限 4，B， 所 得 检验 的 两 种 
错误 概率 确信 为 一 0.031 和 遍 一 0.0989，Bi 与 Bo 相差 其 微 , 但 
ws 和 ow 的 差别 较 大 . 


( 玉 )SPRT 的 功效 函数 的 近 羽 计算 


SPRT 的 功效 函数 8(9) (或 00 函数 下 (的 ) 的 精确 计算 只 在 
个 别 板 畔 萄 的 情况 下 才能 做 到 ， 但 可 以 在 很 一 般 的 条 性 下 推导 出 
一 个 近似 公式 ， 


S48. 


所 用 的 记号 与 定理 3.7.2 一 样 ,我们 先 证 明 下 面 的 引 玲 . 
引 理 8.7.&4， 车 随机 变量 2 满足 条 件 
1* 对 任何 实数 请 由 全 ) = 如" 中 存在 有 限 ， 
2° EZ) 0, 
3° PIZ<O0O >0, PI(Z>D>0, 
则 存在 唯一 的 加 天 0 性 由 (fo) 一 1, 
证 ， 由 条 性 1°, 用 与 证 明定 理 1.2.1 完 全 同样 的 论证 ， 知 
中 C0) 的 各 阶 导数 存在 县 可 在 积分 号 下 { 即 符号 “五 之 下 ? 求 导 , 即 
时 一 再 (Ze ， 遇 一 百人 Ce) ， 
由 条 和 件 32” 知 则 全 > 人 即 惠 ( 阅 为 《一 so，co) 上 的 严 丁 函数, 再 
由 条 件 3 知 jam 昌 人 和 一 co， 因 此 由 (Dy 有 县 仅 有 一 个 棚 利 点 产 ， 
且 是 极 小 值 点 , 如 由 
R= BZ) =0 
决定 ， 由 条 件 2° 知 急 夭 0， 久 是 所 出 全 过 (0) 因此， 苦 六 >>0 
《<0)， 则 必 存 在 各 > 如 Go 一 相 )， 致 出 Gino) 一 上 (0) 一 1。 显然 加 
六 0。 引 理 证 毕 . 
现在 假定 对 某 个 0EB、 变量 六 (下 ) /fa 及) 的 分 布 满足 此 
引 理 的 一 切 条 件 , 则 存在 &49) 关 0， 至 
Boel(fotR) /fat =1. 
于 是 户 () 一 《fw /oC00)" 中 fw)， 满 是 条 件 
{fens) -1. 
因而 和 f(%) 一 样 构成 一 个 分 布 密度 ， 考 虑 检验 问题 
瑟 ": 义 的 密度 为 fo(w) 上 ": 时 的 密度 为 f5 (9)。 
此 问题 的 以 办 中 和 Be 为 界限 值 的 BPRT 与 向 题 
互 : 互 的 密 这 为 六 (人 <*> 四: 卫 的 密度 为 fo,(2) 
的 以 刀 , 呈 为 界限 值 的 SPRT 完全 一 致 . 故 
B06) = 了 Ps (五 被 否定 ) = 了 PCH' 被 否定 18") 一 到 
但 由 《由 ) 中 导出 的 犯 两 种 错误 概率 a*, B" 与 界限 值 各，B" 的 
近似 关系 


s F480 * 


A Bp"/ La), Br (1— 8") /on, 


知 
_ CD) 
BO) = (3.7,16) 
好 Br) . 
EK =1-B(0 -pm a {3.7.17) 


这 就 是 所 要 寻找 的 8(0) 的 近似 公式 . 

拿 例 3.7.3 来 说 ， 一 一 全 十 立 了 除了 2 一 于 一 点 外 ， 都 
有 召 (Z) 了 0， 引 理 3.7.4 的 条 件 1"，3° 当然 满足 ， 故 例 3.7.3 
中 的 SPRT 的 功效 函数 (9) 的 近似 值 , 除 9= 记 一 点 外 都 可 直 
接 用 公式 (3.7.17) 计 算 ， 对 9 去 这 个 点 则 可 用 在 9 汉 时 的 情 
沈 取 极限 定 出 ， 这 个 极限 显然 就 是 去 一 ， 我 们 把 计算 过 程 更 


B—A" 
仔细 地 写 在 下 面 的 例子 里 . 
例 3.7.4. 芒 1， 玉 a 为 芋 ~v 和 06, 了) 的 iid. 样本 ， 要 袜 验 
假设 


H:0&0 eo EK:0>0,, 

我 们 要 确定 此 问题 的 水 平 oo 的 SPRT, 使 其 荔 效 函数 B09) 当 
8 之 办 时 不 小 于 1 一 Bo( 本 之后 给 定 ); 并 算出 8B8( 信 的 近似 值 ， 

根据 定理 3.7.1, 可 考虑 检验 问题 86= 负 属 8= 志 的 SEPRT, 
使 其 犯 两 种 错误 的 概率 分 别 为 a, 6， 这 个 SPRT 即 为 所 求 ， 由 
《四 )， 这 SPERT 的 界限 4 B 近似 地 由 公式 (3.7.12) 给 出 。， 要 由 
公式 如 .7.1 四 确定 BO 的 近似 值 , 必须 求 出 A=( 四 .后 者 满足 
方程 


Bf ep 人 (一 的 三 -了 -网 让 -3 
即 
J oxp | { 一 oa 
一 主人- 1] oxp [- 二 (0) ] do=l. 


a bob 


Tr TFPIArE 


此 式 经 整理 后 成 六 


“op [~ 0h0.00)] dnl. (3.7.19) 
其 中 


4- 到 5 和 《28 h+ Bo) 一 丰 { :十 Do ) 


因为 (8.7.18) 中 的 积分 为 I， 得 
20 ht 0 — BoA) =0. 
如 果 日 关 (9o 十 名 ) /2, 则 上 式 除了 下 =0 一 根 外 ， 消 有 根 疡 一 大 (的 
一 ( 色 十 负 一 20) /人 一 扣 ， 于 是 由 (38.7.16) 得 出 请 ( 的 的 近似 公 
在 许多 情况 下 , 变 求 出 (的 远 非 易 事 。 有 时 可 以 描 无 (的 本 
身 作 为 参数 ， 由 及 (6) 解 出 名 以 得 到 决定 6(9) 的 近似 值 的 参数 
方程 . 
例 3.7.6. 设 入;， 芋 ,,… 为 变量 王 的 iid, 样本 , 至 的 分 布 为 
Pr 一 全 一 工 一 了 交友 一 科 oi1—p 0<p<1, 
要 检验 假设 ?所 2o<y*9>20。、 台 决定 这 问题 的 水 平 a 的 SBPR9， 使 
当 p> 时 其 功效 BPD 之 1 一 B， 此 处 下 >2o， 并 决定 8(p) 的 近 
癌 题 的 前 一 部 分 与 例 3.7.4 一 样 ， 基 依据 定理 3.7.1 及 
(8.7.12) 式 .至 于 后 一 部 分 , 则 需要 由 方程 


p ( 委 ) + (gp) (2) -1 (8.7.19) 
来 决定 内 也 仆 。 除 非 
pf log Ee)/ roe (2 ， (8.7.20) 


(3.7.19) 有 一 根 及 0 (验证 留 给 读者 ). 但 要 由 (3.7.19) 解 出 为 并 
不 容易 ,二 是 我 们 在 侣 .7.19) 中 认 鸭 为 已 知 , 并 解 而 P: 


2 [1 (E/E) (He)} 
此 式 与 8- G- AY/(B—A) 


le 


a mm br i a em a a 


联 立 , 得 到 决定 8(p) 的 参数 方程 。 这 个 作法 之 所 以 可 行 , 是 因为 
出 (3.7.19) 容 易 地 解 击 了 PP， 不 言 耐 喻 ， 这 在 一 般 情况 下 也 是 很 
困难 的 . 


(六 ) SPRT 的 六 SN 函数 的 近似 计算 


ABN 函数 即 五 :CNY 的 近似 计算 依赖 于 下 面 的 重要 等 式 。 
引 理 3.7.5， 设 下 1， 达 3 为 一 串 iid, 变量 ， 又 恋 量 站 内 
取 上 自然 数值 且 ?” 


{N= EB CRS, 三) Rl), (9.7.21) 
假定 召 ( 芒 ) 和 局 (W) 都 存在 有 限 , 则 
BR KR) = EN ECEY, (3.7.22) 


(8.7 .2} 册 开 ald 等 式 
证 ， 利 用 条 件 期 望 的 性 质 GG， 有 


盏 ( 忌 : 十 十 五 四 一 PON=n) BR+ 二 训 |N = 
一 p> PON- DPNN—n) 
-> PO -PENN —") 


一 D3 P(N 人 DHRCT NN. (3-.7 .23) 
由 于 { 万 产 庄 一 人 次 二 直 9 而 { 茹 过 寻 和 皇 天 (本 1， 鼓 
NEB(ITI 1). 
再 由 互 ;， 电 。。… 相 互 独立 ， 知 下 ,与 事件 {> 科 独立 ， 因 此 
(XN 一刀 (XD 一 (ZX) 对 尾 何 名 以 此 代入 (3.7.233), 得 
E(X1+'+ Zs) ~ EX) PN) 
=B(X) 训 OPN- 
-EX)DIPW-N) EX) BN). (3.7.24) 


了 我 们 回 亿 ， 旭 .7.21) 是 指 存在 加 中 之 一 Borel 集 避 煞 {N =n)={ (Ri 
EO}. 


+ BSs» 


这 证 明了 Wald 等 式 ， 在 土 述 证 明 中 需要 提 到 的 是 , 在 (3.7.29) 
中 涉及 -- 些 交换 求 和 次 序 ， 以 及 其 至 连 有 (下 1- … 寺 及) 是 否 存 
在 也 不 知道 , 为 了 把 这 一 点 漠 严 梯 , 应 当 在 (3.7.23) 及 (3.7.24 中 
先 政 天 (为 | 下 这 时 所 涉及 的 都 是 非 负 变 遇 , 故 一 切 推 纪 有 效 , 
内 (3.7.23 和 9D 知 囊 (| 玉 1| 十 … 十 | 代 #|) 过 oo、 根据 Fubini 定理 , 现 
在 可 以 知道 加 (全 4+… 十 也 w) 存在 有 限 且 (8.7.23) 中 的 交 斤 次 序 
契合 法 的 , 引 理 完全 证 明了 . 


, a(X) 
现在 我 们 假定 ， 对 任何 8Bo《2) ~ 如 [ log 友人 有) | 非 0 有 


限 ， 以 玉 记 BPRT 的 试验 次 数 ， 依 定理 3.7.3 证 明 中 得 到 的 
08.7- 门 式 可 知 如 (NW) <oo, 且 廊 作为 一 个 序 贯 检验 的 停止 恋 量 ， 
满足 引 理 3.7 司 关于 六 的 条 件 (8.7.21)， 于 是 根据 上 述 引 理 得 
BotN) = BolBi+ 2) AE). 
加 e221 十 … 十 名 台 的 确 值 难 于 算出 , 但 由 SPRT 的 定义 可 知 ， 当 试 
验 停 止 时 ，Z1 十 … 十 Zw 或 网 守 log B, 或 划 <<log 4，, 入 率 分 别 为 
(外 和 1 一 8()， 如 果 近 似 地 认为 24 十 … 呈 Zw 取 logB 和 tog 4 
之 值 的 概率 分 别 为 有 (的 及 工 一 有 (的 ， 则 将 有 
BolZ1t ZN) BO og B+ CU— B80 ) lg 4, 

于 是 得到 近似 公式 

BolN) [BO) log B+ (1—B(O))Iog A /EZ), (8.7.28) 

关于 公式 (8.7.16) 和 《3.7,25) 的 精确 度 ， 拿 讽 3.7.5 的 情况 
来 漳 , 对 po=0.05, p=0.17，p==0.099， 用 公式 (3.7.19) 近似 地 
决定 4, 了 B( 取 ow=0.05， Bo 一 0.10) ,对 由 这 个 4, BB 决定 的 SPRT 
而 言 ，p(p) 的 确 值 和 由 人 3.7.16) 决定 前 近似 值 分 别 为 0.409 
和 0.44. 也 j.(), BN), ECN) 的 确 值 和 由 (3.7.25) 决 定 的 近似 
秆 分 别 为 虹 .4, 外 .8 和 80.0， 以及 30, 39 和 25， 从 这 个 例 于 的 
情况 看 , 近似 的 程度 还 可 以 ,但 不 是 十 分 理想 ， 


《七 ])SERT 的 一 个 最 优 性 质 
提出 SPRT 的 一 个 动机 在 于 在 同样 错误 梳 率 之 下 ， 降 低 平 均 


和 6H 


抽样 次 数 ， 昌 然 由 于 ,CN) 的 精确 公式 难于 求 得 (以 及 具有 精确 
的 全 种 错误 概率 ma, 8 的 SERT 的 界限 难于 求 得) 也 不 易 作 精 兢 的 
比较 , 我 们 可 以 利用 上 几 段 的 近似 公式 作 一 大 致 的 比较 ， 

拿 例 3.7.4 指 情况 来 说 , 对 固定 的 样本 大 小 呈 及 水 平 a, UMP 
检验 在 86= 内 (> 名 ) 姓 的 功效 为 

BO) =1i— 人 $s — Mn (0 — 00)), 
为 了 使 如 (外 ) 等 于 预定 的 1 一 B， 必须 有 
sa NM (Oi— 0) 一 和 -6 一 一 zi 
由 此 得 出 所 需 的 样本 大 小 为 
见 王 《su 二 28] 太一 名) 

根据 前 几 蜂 第 的 近似 公式 ,可 以 算出 , 在 同样 的 必 8 之 TT, SPRT 
的 平均 抽样 次 数 (N)， 因 而 可 以 考虑 比值 机 人 Jr 对 wa 一 且 
-0.05 计算 的 销 果 (与 加 , 由 无 关 ) 为 ， 在 9 一 加 和 光一 由 时 ， 有 
stN) /ni 完 0.4 和 9， 这 大 致 可 以 作为 9 所 如 和 0 由 时 之 值 . 因此 ， 
在 这 些 情况 下 ,抽样 次 数 平 均 纳 可 以 节省 一 半 . 

下 面 的 定理 是 此 例 中 的 情况 的 一 般 化 . 

定理 3.7.3 (Wald, Wolfowitz) . 设 吕 是 可 测 空 间 ( 他 及。 
上 的 0 呈 -有 限 测 度 , fotw) 和 (2) 为 汪 上 的 两 个 非 负 鹤 s- 可 测 


西数 ,满足 条 件 Ho)an= | id= 而 且 | 六 Co au+ 


] 斑 GBdp>0, 此 处 4= {gw:Jo( 加 光志 (ow)}、 设 四 为 检验 间 是 
互 :下 的 分 布 为 fodh<> 瓦 : 辽 的 分 布 为 fid (3.7.26) 
的 SPRT， 其 界限 信 4，B 满 足 4<1<B， 以 a， 有 分 别 记 这 个 
SPRT 的 第 一 、 二 两 种 错误 的 概率 , 则 对 《3.7.26) 的 任何 检验 和 
( 序 贯 或 非 序 贯 的 )， 只 要 其 犯 两 种 错误 的 概率 分 别 不 超过 m 有 
且 平 均 抽样 次 数 ( 记 为 BoCN| 和 和) 和 到 (| 中)) 有 限 , 则 必 有 
BolN IG) 2 BoN ID), ElNIG) BNIG). 
就 是 说 ， 在 一 切 其 错误 概率 不 超过 指定 的 mw B 的 检验 中 ， 扩 类 到 
此 m 的 SPRT 的 平 沟 抽 祥 次 数 最 小 
这 个 定理 在 1947 年 Wald 发 表 其 序 贯 分 析 的 著作 时 , 将 其 作 


5 。 


为 一 个 猜测 提出 来 , 次 年 他 和 码 olfowitz 一 道 证 明了 这 个 猪 测 .所 
用 的 方法 是 假定 每 次 试验 费用 为 常数 ， 以 及 犯 两 种 错误 的 损失 也 
是 常数 (检验 结果 正确 时 损失 为 0) 时 ， 将 所 提 的 最 优 性 问题 与 序 
页 Bayes 解 的 问题 联系 起 米 .这 个 证 明 也 可 以 在 [7], p.104 找到 ， 
这 里 我 们 不 给 出 这 个 证 明 . 

应 当 注意 的 是 ， 若 本 定理 中 提 到 的 两 个 分 布 是 由 一 分 布 族 
{f(D) dp 6E8} 中 参数 9 的 两 个 特殊 值 g~b 和 9 一 由 所 产生 
的 ， 则 由 定理 并 不 能 推出 ,CN | 和 ) 对 每 个 9€ 日 都 达到 最 小 ， 也 
不 能 断言 它 比 相当 的 置 定 样本 检验 的 样本 大 小 更 小 (当然 ,对 于 
不 为 如 和 09: 的 8 信 , SPRT 的 功效 函数 值 8,(9) 与 固定 样本 检验 
的 功效 函数 值 B,C9) 已 不 相同 , 因此 这 种 比较 就 不 完全 贴切 )， 售 
上 面 举 的 例 来 说 ， 昌 则 在 9<9。 和 gb 时， 比值 也 CDm 比 1 
小 , 但 在 名 <9< 时 , 则 不 一 定 如 此 . 事实 上 , 在 9 二 细 寺 生 的 队 
近 , SPRT 的 Eo《N) 要 比 n 大 .这 一 点 也 不 难 更 解 ; 当 9 在 名 二 名 
附近 时 ,六 的 分 布 既 不 能 说 接近 于 假设 9=6。 成 立 的 一 方 , 也 不 能 
说 接近 于 对 立 假设 0 一 成 立 的 一 方 ， 因 此 要 达到 一 个 决定 就 特 
别 难 ， 关 于 这 个 问题 现 有 一 些 工作 , 此 处 不 能 仔细 介绍 了 . 


/复合 假设 的 情况 

以 上 所 讨论 的 SPRT 只 能 用 于 简单 假设 检验 问题 ， 即 零 假 设 
和 对 立 假设 都 只 包含 一 个 分 布 的 情况 ， 诚然 , 定理 3.7.1 使 其 应 
用 范围 扩 大 到 音译 侯 然 比 分 布 族 ,但 毕竟 还 是 很 有 限 的 ， 例 如 , 常 
兄 的 在 a 未 知 时 检验 正 态 总 体育 (w, 中 中 的 假设 4=0 的 问题 , 就 
无 法 用 上 面 所 鬼 述 欧 BPRT 来 处 理 . 

针对 这 各 复合 假设 的 问题 ,Wald 提出 过 一 种 作法 , 这 实际 上 
十 一 种 Bayes 方法 ， 设 变量 王 有 分 布 族 {f(x, 的 ao 98€9}，, 
症 1， 于 ，，… 为 变量 长 的 iid. 样本 , 考虑 检验 问题 (3.1.1)， 在 Bn 
和 全 Fr 中 引进 c- 域 鹤 x 和 呈 r， 设 ooz 和 Gpz 为 绕 y 和 煞 # 上 的 
硫 率 测度 ( 即 先 验 分 布 )、 当 参数 为 8 时 ,《 玉 …， 于 ,) 的 密度 求 
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nd 


数 为 IF(c。 6)、 因 此 , 积分 
Go oo) =| [fle 0 ]ape()， 
FP oo ,on) =| [Tf Co 0)1dpr C0) 


保 n 
可 看 作 在 先 验 分 布 px 和 gp 之 下 ，( 定 :，…， 互 。) 的 绝对 密度 ， 
因此 , 可 以 对 比值 序列 
FE Cy oo, or) /FE 3, 1 Bn), Bl, 2 

使 用 SPRT 浅 当 地 选择 dpx 和 dpz， 以 求 作出 的 SPRT 具有 某 种 
良好 性 质 ， 

在 Bx 和 Gx 的 公共 边界 附近 的 那些 点 如 对 是 和 否 接 受 假 设 
五 ,一 般 是 无 关 肾 机， 因此 ,可 以 把 如 分 为 三 个 两 两 无 公共 点 的 
区 域 


(3.7.27) 


-BUGrUo. (3.7.28) 
当 8 在 GBs 或 @x 内 时 , 我 们 希望 假设 五 被 接受 或 否定 , 而 当 8 在 
Br 内 时 , 则 不 畦 别 关 心 采 取 何 种 决定 . 这 个 名 常 称 为 “无 分 别 域 ” 
《Tndiffrenoce Zone”), 如果 恕 按 信 .7 了 .28) 的 方式 分 解 , 则 (3.7 .27) 
仍 适用 , 这 圳 示 我 们 不 给 8; 任何 先 验 概率 . 
我 们 以 所 谓 “ 序 贯 术 检 验 ” 海 例 来 说 明 上 述 概 念 ， 问 题 是 要 检 
验 丰 (人 cy 中 的 8=0tw=ao 的 情况 可 转化 为 g 一 ao)， 这 与 辕 定 
样本 时 的 二 检验 所 处 理 的 问题 一 样 , 因而 得 到 这 个 避 称 ， 在 此 ,我 
们 不 用 1sl 而 用 比值 |s|/v 来 衡量 点 ka, 9) 与 堆 假 设 4=0 的 偏差 ， 
给 出 一 个 8>0 将 整个 参数 空间 
B={{g, 四 :一 co<g<oo，0<o<col 
作 如 下 的 划分 
Gr- {(a, o) :a=0, 0 一 <co+， 
Er 一 Ta 0) :1al/o>0}, 
Gr- {tg o:0<|eljo 一 对， 
而 玫 
Bao 一 线段 {4 一 0, 0<g<0} 上 的 均匀 分 布 


= 356，。 


qie 一 线段 {e=c6， 0<o<oj 上 上 的 均匀 筋 布 与 
线段 { 好 = 一 58 0<c< 时 上 的 均 多 分 布 的 


等 概率 混合 ， . 
fw, ~, 2 一 -| ( es) "ex ) exp (~ pe Xe? ) ao, 
je Eh “3 宙 Tn) 


[ee 人 
十 exp (— 3 > (ec do 
令 c 一 oo 得 
J fn) Tn RC 1 tn) 
A (ls sy, Ran) ee fe {1 1 Tn) 


二 pe. 0 racey 
Ci 
| rs ax es ee/ Do? Jao 
基于 这 个 比值 的 SPRT 就 是 所 谓 序 鞭 本 检验 , 这 个 检验 在 文献 中 
有 一些 讨论 ， 此 处 不 细 述 了 ， 我们 只 指出 ， 上 述 比 值 的 计算 可 转 
化 为 中 心 及 非 中 心 了 分 布 密 度 的 计算 . 
关于 da， QPx 的 选择 ,可 以 提出 要 求 ( 例 如 说 ), 在 检验 有 水 
平 a 的 前 提 下 ,使 功效 有 的 在 @r 上 的 最 小 值 达 到 最 大 , 等 等 . 然 
而 , 就 从 上 述 这 个 极 常 见 的 例子 也 直到 , 且 不 说 理论 上 的 困难 , 就 
是 在 实际 计算 上 , 也 是 怎样 的 不 容易 . 
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第 四 童 区 间 估 计 


在 第 二 章 中 ， 我 们 致力 于 寻找 一 个 仅 依 赖 于 样本 的 函数 
入 ), 以 站 作为 未 知 参 数 9 的 估计 。 一 般 , 对 这 种 所 谓 点 估计 而 
富 , 要 是 不 以 基 种 方式 指出 其 精度 , 意义 是 不 大 的 , 给 出 精度 的 方 
法 很 多 , 例如 , 算出 (及) 的 方差 , 我 们 就 能 对 其 精度 有 一 定 的 概 
念 . 然而 , 表达 这 种 精度 最 简单 醒目 的 方法 , 莫 过 于 指出 一 个 区 间 ， 
比方 说 了 允 ( 卫 ) 一 4( 驻 ),6(XY) +8(Z)], 它 以 租 当 大 的 可 能 性 包含 
未 知 的 8， 在 这 样 做 的 时 候 ， 我 们 实质 上 就 用 了 一 种 新 的 形式 的 
估计 , 即 区 闻 估 计 , 来 代替 原来 的 点 情 计 全 (三 )， 

以 上 我 们 是 把 区 间 估 计 作 为 刻 划 点 估计 的 精度 的 手段 . 但 是 ， 
诺 当 把 点 估计 和 区 间 居 计 看 作 居 计 理 论 中 两 个 有 联系 又 有 区 别 的 
分 支 . 各 自 都 有 其 某 些 特殊 概念 和 问题 . 

本 章 的 目的 是 叙述 区 间 估 计 的 基本 理论 ， 在 $4.1 中 ， 我 们 
将 给 出 Neyman 的 置信 区 间 (Qonfidenoe interval) 理论 的 要点. 
这 是 目前 应 用 最 广泛 的 一 种 形式 ， 它 的 好 处 在 于 可 以 完全 纳入 目 
前 流行 的 概率 论 理论 的 格局 之 内 , 因而 有 比较 简单 明了 的 解释 , 更 
具体 地 说 ， 它 在 理论 上 基于 Komxoropon 公理 体系 之 下 的 概率 论 ， 
在 实用 上 人 多 许 一 各 频率 解释 ， 在 8 4.2 中 我 们 将 介绍 某 些 其 他 的 
方法 , 包括 Fisher 的 信 伍 推断 法 (Fiduoial Inferenoe) ， 在 以 后 的 
部 分 我 们 将 讨论 某 些 序 贰 区间 估 计 的 问题 . 由 于 问题 比较 专门 ,我 
们 不 能 不 肩 服 于 作 一 些 很 一 般 性 的 介绍 ， 更 多 的 细节 要 到 文献 中 
去 找 , 因为 , 可 错 的 是 , 目前 在 这 方面 尚 缺乏 足够 详尽 的 专门 著作 ， 


$4,1. 置信 区 间 与 置信 界 


《一 ) 基 本 概念 
置信 区 间 理 论 是 Neyman 在 其 1937 年 的 工作 中 系统 地 发 展 
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起 来 的 , 下 面 的 定义 在 这 个 理论 中 是 基本 的 . 

定义 4.1.1. 设 变量 蕊 的 样本 空间 和 分 布 族 为 {( 了 9 绍 
Pp，9E6}，g(0) 是 定义 在 @ 上 的 有 限 实 值 函数 ， 若 外 (2) 和 
名 (w) 是 两 个 定义 在 沼 上 的 有 限 的 及 o- 可 测 函 数 ， 则 称 [ 记 作 )， 
多 (办 ] 为 8 全 的 一 置信 区 尊 (估计 ) .任何 一 数 1 一 a, 0<a<l 满 
足 条 性 . . 

inf Po (gCX¥) I EG) 1—a, ‘4.I.1) 

则 称 为 是 置信 区 间 [六 ，j] 的 置信 和 水平 (Confidence leveD)， 而 
(4. 工 .1) 的 左边 称 为 [ 忒 ， 阿 的 雹 入 系数 (Confidence coeffieient) ， 
区 间 的 端点 页 四 和 加 (2) 有 时 称 汶 置信 有限 (Confidenoe limit). 

在 (4,1. 了 1D) 中, 8 看 作 是 一 个 未 短 的 , 且 没 有 任何 随机 性 的 数 ， 
但 区 间 [和 (0)， 95(2)] 与 样本 zz 有关, 因此, 这 区 间 是 否 包 含 未 知 
的 g(), 也 与 样本 有关 , 因此 在 概率 测度 Po 之 下 , 具有 一 定 的 
概率 ， 在 这 个 解释 下 , (4.1. 了 的 意思 是 ; 随机 区 间 [外人 加， 记 罗 ] 
包含 固定 点 y( 四 的 可 能 性 (概率 ) 不 低 于 1-w, 不管 和 的 真实 值 如 
何 , 在 实用 上 ，(4.1. 卫 可 以 这 样 畴 : 假定 我 们 反复 地 使 用 [包罗 ] 
来 知 计 g( 四 ， 设 第 nn 次 使 用 时 , 样本 为 各 而 参数 的 真实 值 为 gw 
n=1, 2, …。， 出 在 我 们 所 作出 的 一 系列 论断 

“被 估计 的 gC(0。) 落 在 [ 访 (em 名 (4)] 内 ”3 一 I，2,… 之 中 ， 
从 长 期 看 , 至 少 有 100( 一 a) %% 基 正 确 的 ， 因 此 , 这 里 所 涉及 的 概 
念 都 允许 有 一 种 通常 的 概率 论 解 释 . 

从 定义 4.1.I 看 由， 属 信 水 平 (及 系数 ) 所 反映 的 是 区 间 全 计 
的 可 光度 的 一 面 ， 汰 一 个 重要 方面 是 其 精确 度 , 它 比 方 说 可 用 其 
长 度 来 刻 划 , 当 区 疗 长 度 记 一 六 太 大 时 , 虽 则 其 可 靠 度 其 高 , 但 可 
能 也 于 事 无 补 , 正如 估计 一 人 年 龄 在 十 岁 到 八 十 岁 之 间 , 可 靠 则 
然 是 , 而 琉 略 亦 甚 明显 , 这 两 个 方面 (可靠 度 与 精确 度 ) 是 互相 韦 盾 
着 的 两 个 侧面 。 区 间 佑 计 理 论 的 要 则 ,可 以 说 就 是 充分 使 用 样本 
提供 的 信息 , 以 作出 尽 可 能 可 靠 和 精确 的 估计 来 

暂时 先 放 下 这 个 问题 ， 我 们 来 考察 一 下 构造 置信 区 间 的 具体 
方法 . 


二 D69. 


1. 构造 区 间 估 计 的 一 个 简单 模式 如 下 ， 设 法 找到 一 个 酒 数 
GQ( 是 ,9g( 信 ), 其 分 布 为 已 知 且 与 8 无关， 这 话 确切 的 含义 是 存在 
一 个 已 知 的 与 9 无 关 的 分 布 议 数 巴 ( 叭 ， 臻 

PetG(X, gD) oD — FD), (4.1.2) 
适当 决定 两 个 常数 0, 8， 至 
人 二 人 [再 gO ED =FOO Ft-0=1—a. (4.13 
又 假定 不 等 式 6 世 GQG( 玉 ,9g( 办 ) < 可 转化 为 等 价 的 形式 : 
ou, HDI Ed EO Sh), 

PG (RY SEIDEL 1a {4.1. 汪 
于 是 [各 (下 ), 知 ( 卫 )] 为 g(9) 的 置信 系数 1 一 的 翁 信 区 间 , 初等 
统计 中 许多 常见 药 区 条 估计 就 是 用 这 个 方法 导出 的 . 

例 4.1.1， 设 mw， aa 为 取 自 本 人，c9 的 iid 样本 , 要 求 4 
的 置信 区 向 估计 ,我 们 已 知 ， 

Ve Eo 


则 有 


(这 里 8=- -了 内 CE 部。 ) 服从 分 布 ii。 与 we 无 关 , 因 


此 Po (| 之 2 千 二 四 | < (各 =1-s， 二 是 得 到 4 前 一 个 
时 信 系 为 了 “的 置信 区间 为 


[2 -天 St (全 Z+- 产 So- 针 )].。 (4.1.D 
这 常 称 为 (一样 本) i- 区 他 (和 估计 ). 
用 同 祥 的 方法 得 到 : o? 的 置信 系数 1 一 & 的 区 间 朱 计 为 
(nh— 1) S82 {nm— 1) I? 
| -人 
入 车 及 i， 各 了 I，…， 了 了 ,分别 为 取 自 入 (a，o 东 和 
入 ,a 沪 的 iid 样本 ,; 则 
人 人 9 十 名 一 全 1 (PF 一 在) (bo) 
Tm 十 名 MOD ~ in 


360 4# 


此 处 (mr-- 攻 辣 = 喇 ( 了 一 到 5 名 一 埠 避 一 妆 (Y1 一 了 )*， 由 此 得 


下 ma 


出 包 一 & 的 一 个 置信 系数 1 一 a 的 区 间 佑 计 为 
[(Y-X¥)- CN ton_s (5) 


mmm na) 


i 十 Vm stm 1 区 
-THY mV mt Dts( $)|. 
(4.1.6) 


这 常 称 为 两 样本 t- 区 闻 ， 扇 样 ， 车 及 ;， ey 站 和 了 1， ey Y, 分 
别 来 自 总 体 入 (wo 了 DD) 和 入 CB，0o 有 D, 则 03/oi 的 一 个 暨 信 系数 
i1 一 a 的 区 闻 估 计 为 


[人 /Pe (3) 区 /Pr 人- 对 | 
例 4.1.3. 设 琶 ， …， 室 ws 为 变量 所 的 ia， 样本, 到 的 分 
布 族 为 指数 旗 {9e “dw, B>0，28> 避 要 求 的 区 间 估 计 . 
注意 到 20o 在 参数 有 = 如 时 有 分 布 粒 ， 知 
209, 一 290《 轩 1 十 … 十 于 ) 心 和 (工作 


故 P( 驹 , (一生 )<298。,< 娩 , ( 针 ) 1 一 a， 从 而 得 到 9 的 一 个 
轻信 系数 1 一 a 的 区 间 估 计 为 


[2 (1- 重 ))/28% (8 ())/25]. (el 

其 有 有 指定 置信 系数 的 区 闻 怖 计 不 是 唯一 的 ， 拿 本 情 而 言 ， 除 
(4.1.8) 外 ,任何 满足 条 件 如 盖 册 os 之 0, 所 二 ma= 汉 的 四 ， oa 置 
信 区 间 

LOB, — 0) ) /328,, Can es)) /28,], 

有 置信 系数 1 一 &. 

在 避 .1. 人 中 的 下 (@) 为 离散 分 布 时 , 满足 (.1. 吕 的 ce,& 来 
必 能 找到 , 这 时 就 无 法 由 之 作出 具有 指定 置信 系数 1 一 a 的 区 间 悟 
计 ; 我 们 可 以 适当 调整 1 一 a 之 值 ,或 实行 随机 化 (相当 于 假设 检验 
中 的 随机 化 检验 ), 后 一 点 将 在 以 后 举例 说 明 , 
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在 一 般 情况 下 ,要 找到 一 个 具有 记述 性 质 的 GG( 王 ，g (由) 并 
非 易 事 , 对 此 , 有 时 可 使 用 大 样本 方法 来 解决 问题 , 具体 作法 可 以 
及 下 例 看 到 ， 

例 和 .1.8. 设 卫 1,…， 芝 ,为 变量 了 的 i 遍 , 梯 本 ,下 的 分 布 
族 为 

P(X-0 1- P(X=D) -1—p, 0gp<1. 
要 求 多 的 区 间 佑 计 ， 


从 中 心 极限 定理 知 ,车 记 8, 一 疡 工 。 则 当 mco， 
So—np > Ww, 1), g~1— 
/pg 一 (0 D, a ». 


玫 当 入 巷 大 时 不 妨 就 认为 人 二 2 有 分 布 娘 (0， 匀 ， 寺 是 近似 地 
pg 
有 
+ — Oo 
P, (一 za < TA a0)~1 &, 


上 了 右边 的 个 等 起 不 难 证 明 其 等 价 于 


rE [s(t -A Ed 人 + 如 )， 


项 让 nD (1— A 
t+) (4.1.9) 


此 姓 入 一 gaa, 员 一 Sn. 于 是 性.1.9) 中 的 区 间作 为 2 的 置信 区 间 ， 
当 % 充分 大 时 置信 系数 近似 地 为 1 一 ot 
对 一 般 情况 , 通常 可 作出 8{(B 的 极 大 似 然 估计 g(6.)， 在 很 
普遍 的 条 件 下 将 有 
[g@)—g0)] /oh ~ NO, 1), 
当 "很 大 时 近似 地 成 立 ， 带 常 在 将 所 代替 ap (四 中 的 98 时， 上 式 


DD 不 论 多 大 ,只 要 把 取得 充分 地 接近 于 0 或 1， (8 一 np) /NRBg 的 分 布 与 
林 (0, 防 仍 会 有 较 天 的 差距 。 因 此 严格 地 说 ,如果 如 , 二 内 的 一 切 p 部 可 能 , 则 不 能 认 
为 寻 1. 助 近似 地 有 轻信 系数 工 -wx 为 克 限 这 个 困难 , 此 处 可 以 假定 存在 mm>0， 致 
[po, 1 一 细 和 包括 了 多 的 全 部 可 能 竺 。 对 由 大 样本 理论 作出 的 区 间 基 计 , 一 般 部 存在 这 
个 问题 。 
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仍 成 立 ， 出 此 宫 得 出 g(0 的 大 样本 区 间 佑 计 fy 人) 一 2 ov 人 过)， 
gt 十 3 aos 人 @]， 当 mn 很 大 时 近似 地 有 名 信和 系数 1 一 a (参考 上 
页 足 注 力 ) 作 为 这 方面 的 重要 例子 , 有 所谓 Behrens_Fisher 问题 
设 二 1， wy 下 mm 和 了 1 yg 工 。 为 自 总 栖 Na, go 和 Nb, oa 中 
抽出 的 设 ， 样 本 , 要 作 忆 一 & 的 区 闻 悄 计 , 这 个 问题 在 文献 中 有 很 
多 讨 论 , 我 们 有 


[FD) -G01I/Yiot oN (0, 1), 


用 如 -一 二 局 (一 瑟 * 和 S83- 


P)? 代 赫 上 
式 中 的 呈 和 和 i, 由 于 这 些 都 是 of 和 oo3 的 相合 信 计 ,有 

,lim [TF -0 0] /YESti I > No, 1), 
于 是 当 mr, nt 充分 大 时 , 得 到 5 一 g 的 大 样本 区 间 犀 计 


一 A 2 有 1 TT 
|P~— 关 一 V 如 二 全 2 一 了 + 3 sl. 
不 论 5, 2 中 只 之 值 如 何 ， 当 ， 环 都 无 限 增 如 时 ， 此 区 闻 和 包含 
5 一 的 概率 收敛 于 1 一 a， 我们 将 在 本 节 (! 五 ) 中 对 这 个 重要 问题 
作 更 仔细 一 些 的 讨论 ， 
3. 另 一 个 构造 区 闻 估 计 的 方法 基于 其 与 假设 检验 的 联系 , 这 
个 联系 组 然 简 单 ， 汉 是 Neyman 在 发 展 其 理论 时 的 一 个 重要 出 发 
点 和 和 工具, 因为 , 这 使 他 可 以 把 他 和 卫 . 8. Pearson 合作 发 展 的 假 
设 检验 理论 用 于 区 间 信 计 间 题 . 
引 理 .1.1. 设 上 4(6o) 是 检验 问题 
Gbo < > O00 (4.1.10) 
的 某 信 窒 验 go, 的 接受 域 ( 即 $s, (2) 一 0 当 E00) , po, (vw) 一 1 当 


和 4 乌 帮 (00)), 又 集合 
{0:¢E A} = SB, 


为 一 个 有 界 闭 区 向 , 则 为- 作为 8 的 四 信 区 间 , 其 置信 水 平 为 1 一 a 
的 充 要 条 件 为 : ge 为 (和 ,1.1 站 的 水 平 a 的 检验 . 


* 


证 ， 本 引 理 的 证 明 直 接 从 等 价 关 系 
HES, OE A 

得 出 . 

前 面 列 举 的 几 个 简单 枫 子 也 可 以 用 这 个 方法 得 到 ， 歼 在 此 不 
多 重复 了 , 这 个 引 理 的 重要 性 存 于 ; 不 仅 区 间 知 计 的 置信 水 平 与 假 
设 答 验 的 显著 性 水 平 存 在 着 引 理 中 指出 的 联系 ， 而 且 它 们 的 最 优 
性 也 有 一 年 的 联系 ， 因此 ， 县 有 某 种 最 优 性 质 的 区 间 估 计 有 时 了 可 
以 从 扯 应 的 . 具 同 样 最 优 性 质 的 假设 检验 而 求 得 , 以 后 我 们 将 更 详 
细 地 谈 到 这 一 点 . 

在 不 少 实际 问题 中 ， 我 们 关心 的 上 只是 参数 8 在 一 个 方向 的 界 
腿 ， 例 如 , 一 种 新 材料 的 强度 ,我 们 关心 其 下 界 ， 一 种 新 药品 的 毒 
性 , 我 们 关心 其 上 界 , 等 等 对 这 种 情况 ,两 端 都 有 限 的 这 间 佑 计 
不 适用 或 不 必要 . 相应 地 , 我 们 立 如 下 的 定义 ， 

定义 和 . 工 .2 沿用 定义 4.1.1 的 记号 ， (人 称 为 8 的 具 置 信 
水 平 1 一 a 的 置信 下 界 (Confidenoe lower boumnd , 若 

inf Pe OK) ED 1 —a, (4.1.11) 


土 式 左 端的 量 称 为 8 的 置信 系数 , 相应 地 ,8(z) 称 为 8 的 其 置信 水 
平 1 一 a 的 置信 上 界 (Confidence upper boundy, 若 
inf' Po 中 ( 开 ) 守 内 之 1 一 a {4.1.12) 


而 上 式 左 端的 便 称 为 6 的 置信 系数 . 

前 面 指出 的 构造 置信 区 疗 的 方法 ， 以 明显 的 方式 推广 到 求 妓 
信和 界 药 情形 , 在 此 就 不 多 重复 了 . 

君 信和 办 与 置信 区 问 之 间 , 存在 着 一 个 简单 联系 , 我 们 先 引进 一 
个 辅助 概念 ， 称 [名 (02), 92 (0)] 为 g(0) 的 置信 水 平 1 一 eg 的 相似 区 
间 人 计 , 若 

Pold 二 < ) 10, 对 一 切 8E6. 

完全 类 似 地 定义 相似 置信 界 ， 

引 理 4.1.2. 设 吕 和 器 分 别 为 昌 的 置信 系数 党 了 一 和 工 一 四 
的 (相似 ) 党 信 下 、 上 界 ， 生 对 任何 ws 有 8(2) 所 5Gv)， 则 (0)， 


"DO. 


5(o] 为 8 的 置信 水 平 为 1 一 a 的 (相册) 区 闻 储 计 ， 池 处 一 a 
十 2 
证 .在 引 理 的 假定 下 , 显然 己 下 三 个 事件 
{OX) EEGR)), {O02)}, >AK)} 
下 斥 旦 其 并 为 必然 事件 , 于 是 立即 推出 本 引 理 . 
在 例 和 .414.1 和 4.1.2 中 ， 我 们 求 出 的 略 信 区 间 的 上, 下端 点， 


实际 -上 都 是 有关 参 数 的 置信 水 平 为 1 一 写 的 相似 置信 上 、 下 界 ,而 


置信 区 间 蚌 相似 的 . 
署 信 区间 前 峰 念 不 难 推广 到 多 维 的 情况 .。 
定义 4. 江 .3.， 设 变量 芯 的 样本 空间 和 分 布 族 为 {(2, 二 
了 0) ,0 EO}, yg{) 为 定义 于 犁 上 取 值 于 Br 的 砂 数 .SCw) 是 一 个 
定义 于 党 上 的 前 数 ， 生 个 5t2) 都 是 三 的 一 个 子 集 ， 溢 对 某 个 
a, Ool, 
jnf' P(g (0) ES (CX)) >1—a. (4,1.19 


则 称 (XD) 为 9(9) 的 置信 水 平 为 1 一 2 的 置信 集 ， 他.T.18) 左边 
的 量 称 为 SX) 的 里 信和 系数 . 

在 高 维 的 情况 , 置信 和 集 的 形状 可 以 多 样 化 一 些 , 但 一 般 也 只 限 
3 长方体 (其 面 与 坐标 六 平行 ) 、 妹 、 椭 球 之 类 , 当然 , 定 六 全.1.3 也 
让 用 于 一 维 的 情况 , 这 时 六 人 不 必 是 一 个 区 间 , 然而 , 出 于 显然 的 
型 由 , 在 一 维 的 博 况 几乎 有 考 虑 置信 和 集 为 区 间 的 情形 , 但 不 必 排 斥 
(9 不 为 区 间 的 可 能 性 ， 


(全 ) 一 致 最 精确 的 置信 鼻 《Uniformly Most 和 oenrate Gon 在 
doenoe Bound, 简称 UMA 轩 信 和 界 ). 

因为 上 下界 的 理论 是 完全 平行 的 ,我们 将 只 行 细 讨 论 下 界 的 
情况 ， 

治 用 定义 4. 工 .2 的 记 导 ， 设 旭 (w) 为 吕 的 置信 本 平 1 一 a 的 置 
信 下 界 ， 这 保证 了 对 任何 好 (2) 确 为 8 的 下 界 ” 这 一 断言 的 要 
这 ,不 会 低 于 一。 在 这 个 前 提 下 , 我 们 希望 Ge) 尽量 不 要 低估 
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8， 这 个 要 求 可 以 更 确切 地 表达 如 下 : 任 给 六 < 所 我 们 希望 “8 (0%) 
比 久 小 "这 种 情况 意 少 出 现 愈 好 ， 这 个 考虑 导致 如 下 的 定义 ， 
定义 生 1. 和 4， 设 让 (站) 为 的 图 信 水 平 1~& 的 置信 下 界 ， 甘 
对 任何 其 他 的 具 同 一 置信 水 平 的 虱 信 下 界 如 Cw} 及 任何 久之 8, 必 
在 
Pot RY EOE PN. (4.1.14) 
则 称 CTY 不 8 的 一 个 置信 水 平 1-a 的 UMA 置信 下 虐 ， 
完全 同样 的 方式 给 出 UMA 署 般 上 界 的 定义 . 
寻找 UMA 置信 下 界 的 方法 基于 下 面 的 吉 实 . 
引 理 4.1.8， 设 4(po) 为 假设 检验 问题 
8 页 二 DER (4.1.18) 
的 水 平 x 的 DMP 检验 的 接受 起 (此 处 及 (60) 为 由 如 确定 的 一 个 
集 , 它 属于 日 但 不 包含 g) , 则 几 关 系 式 3( 四 = 但 :zEE4(0)} 所 确 
定 的 So) 为 6 的 一 个 置信 水 平 1-a 的 君 信和 集 ， 且 若 全 (四 也 是 
8 的 所 同一 壬 信 水 平 的 置信 和 集 , 则 对 任何 六 EE(0) 有 
PrtOESIX) EP HEN: (FR). {44.1.1 的 
证 .前 一 -结论 已 在 引 理 4.1.1 中 证 明 过 了 , 现 证 后 一 结论 , 定 
区 一 Yi:8ES (wy)}， 依 引 理 4.1.1， (890) 为 {4.1.15) 的 
一 个 水 平 a 检验 的 接受 域 ,大 由 4(00) 为 UMP 检验 接受 域 , 知 对 
任何 EKR(00), 有 Po( 且 EA) 二 Po Ed) 邯 
Po OENS CH) < Py (GES (XY)), 
即 《4.4.18), 于 是 引 理 得 证 ， 
现在 可 以 证 明 下 曾 欧 定理 ， 
定理 4.1.1.， 设 五 的 (关于 绍 >: 上 菜 个 o- 有 限 测度 上 的 ) 
密度 族 {f(z, 分, 9EG@1 为 关于 统计 量 T 了 (w) 的 单调 似 然 比 族 , 以 
了 Gt, 人 记 人 CX) 的 分 布 函数 , 假定 这 函数 分 别 对 二 和 和 而 言 都 连 
续 , 则 
1° 台 的 UMA 置信 下 界 8《 玉 ) 存在 (对 任何 置信 水 平 1-o 
0<w<TD, 且 由 引 理 4.1.3 决定 ,其 中 Ko) = {0:06E6, 06>00}. 
2° 若 对 某 个 xxE 吧 ,方程 
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F(T, D1—a (4.1.17) 
在 台 内 有 解 , 则 此 和 解 必 叭 一 且 央 为 8(2)， 
证 ， 考 虚假 设 检验 问题 
BPo <——> Oo, (4.1.18) 
根据 定理 38.2.23 以 及 了 (了 ) 的 分 布 重 数 的 连续 性 ， 知 存在 
(4.1.18) 的 水 平 a 的 UMP 和 检验, 其 否定 域 为 世 : (的 >C0o 
其 中 0 (9w) 满足 
Po TFI >OODN) =a. (4.1.19) 
我 们 取 Co 为 使 址 . 工 .19) 成 立 的 最 大 者 . 
根据 定理 3.2.2G， 当 8> 久 时, 有 
PolT (HX) TO >a. 
这 与 Pet 了 (XX) 之 0( 罗 ) =a 比较 , 得 出 CQ 的 C980 即 台 全 为 
8 的 严格 上 戎 孙 数 ， 易 见 C (yD 对 9 右 连 续 ， 实 际 上 ， 取 一 串 
办 了 日 由 OC9) 的 上 升 性 知 ， lim Co 一 2 人 另 一 方面 , 有 
人 《Po DO) 一 ca 令 人 >co， 利用 
了 (从 对 0 的 连续 性 ,得 了 oT ET) 之 由宇 wm, 于 是 时 Co 为 满 
是 绽 .1.19) 的 最 大 省 知 9 雪人 ( 如 )， 这 证 明了 4 一 C409) 因而 证 黄 
了 了 Ct 四 的 右 连 续 性 ,现在 定义 
各 (网 =inf{0:T (2) EO ), (4 .1.20) 
则 由 OO 的 右 连 续 性 知人 C8) 一 C8t9D))， 所 以 
SO {TAO = 0H0E0, Dee， 
于 是 由 引 理 4.1.3 立即 得 出 , 为 8 的 置信 系数 1 一 a 的 UMA 下 
蛤 , 这 证 明了 1%, 

为 证 2°, 注意 根据 定理 3.2.2 (让 ， 玉 (8), 护 为 8 的 严 减 
函数 (在 外 :0< 了 FOI(D, 办 之 二 内 ), 这 立即 得 到 民 .1.17) 的 解 的 
唯一 人 性, 现 设 (6) 为 (4.1.17) 的 解 , 则 下) 一 和 注意 
在 此 式 中 % 已 固定 , 随机 变量 基 卫 = 了 ( 玉 ))， 于 是 出 人 口 的 坊 大 性 
知 


十 定理 3.2.2 考 虚 的 问题 是 8 所 名 -+ 98>90, 但 显然 其 结论 对 问题 性 .1.18) 也 
适用 。 
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OO 0) TT (wp). (4.1.21) 
另 一 方面 , 由 Py 扣 了 8)) 对 日 的 严 增 性 , 知 在 Pe 了 了 (2) 之 a 
对 任何 六 之 #8.{w) , 故 

OO <TOw) 对 任何 蚁 < 外， (4.1.22) 

将 {4.1.21) 与 {4.1.2 史 结合 , 注意 OC 为 乡 的 上 上 升 函数 , 知 2[2) 
一 inf{8: 了 TOD OOD)1=8.(z)， 定 理 证 毕 . 

由 于 单 参 数 指数 旗 {0( 扑 ep (ww)} 为 单调 局 然 比 族 ,如果 

人 (于 ) 的 分 布 函 数 满足 定理 中 的 连续 性 要 求 ， 则 总 的 UMA 下 界 

存在 且 可 按 定理 中 指出 的 方法 求 得 ， 由 此 推出 ,例如 : 若 1,，…， 

及 , 为 下 人 的 ii， 样本, 则 斑 一 zw/ Vm 为 9 的 置信 系数 1 一 a 


的 UMA 相似 下 界 , 在 例 4.1.2 中 , 灼 民 -a) 只 式 为 0 的 置信 


系数 1 一 a 的 UMA 相似 下 界 , 对 上 界 显然 成 立 完全 类 似 的 结果 ， 

在 全 ( 斑 ) 的 分 布 为 次 散 型 的 情况 ， 上 述 定 理 不 适用 ， 这 时 ， 
我 们 可 以 不 坚持 1 一 a 这 个 信 ， 即 在 (4.1.19) 中 ， 取 (6o) 使 
PT( 下 )>OQ(60)) 与 a 尽 可 能 接近 ， 或 者 采用 下 面 讨论 的 随机 
化 方法 

由 于 引 理 3.7.1, 过渡 到 也 ( 太 ) 的 分 布 , 不 妨 设 变量 蕊 取 实 
数值 是 其 密度 fv， 从 为 关于 前 单 调 似 然 比 族 ， 出 于 应 用 上 最 
常见 的 情况 是 有 职高 散 值 {0, 也 名 …} ( 取 {0,， 1，…, 9 的 情况 
包括 在 内 ), 我 们 就 这 个 情况 来 讨论 , 记 

了 (有 一 四 = 了, 0, r=0, 1, 2, +:", EQ, 
{flw, 从} 为 单调 似 然 比 族 ， 考 虚 一 个 新 变量 了 ， 它 对 工 测 度 弛 
有 密度 
gy, OD =f (yl, DW, Oy<0, PEO, {4.1.99) 

显然 {gy 幼 } 仍 为 单调 似 然 比 族 (关于 芒 ， 且 易 见 了 的 分 布 与 
互 上 十 匠 问 , 这 里 卫 , 独立 芹 UU~ 有 RO, ， 因 此 , 了 的 样本 值 Y 
是 四 让 的 样本 值 = 加 上 一 个 服从 及 C(0, 巧 的 独立 观察 值 而 来 , 正 
是 在 这 个 意义 上 把 这 个 方法 叫 随 机 化 方法 . 

了 的 分 布 函 数 下 (y, 站 当然 对 y 连续 , 车 假定 了 (zw, 8) 对 任何 


» B68 + 


非 负 整数 = 为 的 连续 范 数 , 则 易 见 了 P(y, 9) 对 0 连续 , 于 是 定理 
4.1.1 的 条 件 对 了 全 满足 ， 因 而 可 作出 (9 的 ) 基 于 了 的 具 置信 水 
平 1~a 的 OMA 下 界 . 

我 们 举例 来 说 明 这 个 方法 、 

钢 4.1.4. 设 耻 :，…， XX 为 自 Poisson 分 布 族 中 取出 的 ia. 
样本 , 其 联合 分 布 为 关于 人 P(X) = 克 : 十 … 十 站。 的 单调 似 然 比 族 ， 
琴 多 的 分 布 为 

PT =f =e "m1, f=—0, 1, 2, 1, 0, 
以 可 记 (0, 力 变 量 , 为 其 观察 值 , y 一 了 了 (o) +4 一 识 卫 :+t 车 
yl1—a, 则 方程 

1 一 ws 一 了 了 人 0) 一 到 ee(ng)1/it ewbng)twyt! 有 唯一 解 (请 
读者 证 明之 )， 此 解 即 为 &， 荐 y<1~a, 则 对 任何 bo>0， 9 在 

b= <> 0>0 (4.1.28) 
的 水 平 a 的 UMP 检验 的 接受 域内 , 即 yE4(0o) 对 任何 go>0, 故 
SW) {9:9>0} 而 Q) -0. 
例 41.85. 设 于，…， 下 。 为 自 两 点 分 布 
PFD 1 PR =1 0 O00el, 


总 体 取出 的 id， 样本 , 其 密度 西数 关于 TT(w) ~ 之 ; 卫 , 为 单调 似 然 


比 族 ， T~B {ne, 人 的 ， 因此 ， 车 加 袍 和 .I. 生 那样 记 y 一 1 十 专 t= {%), 
则 可 求 漠 9 的 基于 y 的 置信 水 平 为 1-a 的 UMA 下 界 ， 当 1-a 
gs 十 代 一 岂 时 , 易 见 方程 

1—a-Fly, ~ 人) 0 有 
唯一 解 , 此 解 即 为 若 0<y<1 一 m, 与 上 俩 同样 的 推理 知 (9) 
0:0 有 8 二， 而 和 一 0。， 车 gy 记 Rw 十 企 一 的 ， 则 检验 问题 
信 .1 .234 的 水 平 s 的 UMP 检验 的 接受 域 不 包含 y, 对 任何 %€ 
[0, 了 ,这 时 SG) 为 空 集 , 而 8 (9) 无 定义 ;为 了 克服 这 个 困难 , 令 
=1， 当 之 十 忆 一 只 不 难看 出 ， 经 过 这 样 补充 定义 的 色 
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是 8 的 置信 水 平一 ea 的 TUMA 下 界 ， 水 平 奖 1 一 a 显然 ， 而 对 任 
何 名 <8 (由 时 知名 之 1) 及 尾 何 奸 入 水 平 1~a 的 下 界 , 由 引 于 
4.1.3 得 
Po 有 Po 人 人 ESTED)， 

但 显然 Po EBCOD)) = PolQO7) 过 的 ， 册 此 知 旦 确 为 UMA 的 . 

定义 和 . 工 . 生 的 要 和 肯 是 : 既 要 保证 站 能 以 至 消 为 研一 ea 的 概率 可 
作为 8 的 下 漠 , 又 要 使 其 尽 可 能 大 , 从 这 个 角度 看, 下 曾 的 性 质 把 
UMA 下 界 的 本 质 表 圳 得 更 深刻 . 

定理 .9. 设 9, 四 =0， 当 中 而 当 生 < 时 为 8 的 
单调 下 降 冰 数 (由 此 知 工 疡 中 .着 (于 ) 为 上 的 置信 水 平 1 一 a 的 
UMA 下 界 , 则 对 任何 置信 水 乎 1 一 a 的 下 界 如 (7 必 有 

BeLLO, GCE EB LLO, .CEY)], 

对 一 切 8E8. 

证 .注意 到 如 为 UMA 下 办, 对 任何 <8 有 

POCEYI EW CPO (FE) SW SP OT) <O, 

散 可 定义 两 个 分 布 沙 数 ， 


Fu) -{ Po lO XE) ED /Pold. (TX) OD, Wb, 
1, 0, 
到 (= 位 人) ED /PO CH) «OD, Wb, 
1, wer0, 
这 时 五 (0 起 ,QD 对 一 切 羽 


不 难 证 明 
三 = (9, WAF OO e fz (0, Wab, (0 ， 


此 因由 引 理 3.7.8 知 存在 非 降 画 数 户 和 产 ， 广 (网 裤 户 (0， 使 
话 (00) 和 fst0) 的 分 布 沙 数 分 别 为 也) 及 也)， 此 处 U~BRO0， 
1}。 因 此 


| EC war =f £6, fa) de 


<[ £6, fr) LO, wear. 


870. 


a a aaqirrucamaha 二 症 ，auanWnnhy .ai 人 Hi 


由 此 得 出 
Elbe, 8CD)] = LO, 办 [PCE) WD] 


= 已 (8.( 瑟 ) < 及 | £0, WaF 人 
<P,(0.(X) < 人 全 工人, wan, 


- ff 了 人, WaPo G(X) <0)] = ELLO, 6.))], 


定理 证 毕 

由 此 定理 可 知 , 著 把 虽 过 低估 计 允 看 作 一 种 损失 , 且 以 (6， 
外 来 衡量 这 损失 ， 则 在 对 工 施加 上 述 合 理 的 限制 时 ，UMA 下 内 
在 县 同一 置信 水 平 的 一 切 下 界 中 , 使 此 损失 的 平均 值 达到 最 小 . 


(三 ) 一 致 最 精确 的 无 偏 置信 和 界 与 时 信 区 间 ( 简 称 为 UMAU 界 
与 UMAU 区 间 》 


从 上 眉 看 到 ，UMA 界 的 存在 与 革 种 假设 的 UMP 检 验 的 存在 
有 关 , 在 多 参数 分 布 族 的 情况 ，UMP 检验 一 般 不 存在 , 因此 UMA 
界 一 般 也 不 存在 ,但 由 $3.3 可 知 , 在 一 些 情况 下 ，UMPU 检验 存 
在 , 这 使 我 们 考虑 把 无 偏 性 概念 类 似 地 推广 到 区 间 居 计 问 题 中 , 然 
后 在 一 切 无 人 适 区间 估计 中 , 试图 寻找 出 一 个 在 某 种 意义 下 最 优 的 . 
为 此 , 我 们 假定 子 的 分 布 族 为 {76,s}， 其 中 8 是 一 维 的 , w 可 以 是 
多 维 的 , 它们 都 是 去 的 分 布 的 未 知 参 数 . 我 们 需要 的 是 8 的 忠信 
区 间或 置信 界 .. 

定义 和 .1.5， 若 &( 了 ) 满 足 条 件 

下 EL) ED le, —HD 0, 9); 
Pao lI) EO ln, — 轨 F< 和 gp. 
则 称 为 一 个 置信 水 平 1 一 a 的 无 偏 饪 信 下 界 ， 
车 对 任何 2 有 (wz) 所 8(z), 且 
Pao (QH) EISEA ER)) >1—o0, —H O, 9); 
Poe (Q(X) EOEOR)) 一 — 切 #0, 和 gp. 
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则 称 [ 故 为 一 个 置信 水 平 1 一 a 的 无 偏 置 信和 区 间 *. 

一 臻 最 精确 的 苑 偏 置信 和 界 《UMAU 界 ) 与 一 致 最 精确 的 无 仿 
置信 区 间 (UMAU 区 间 ) 以 明显 的 方式 加 以 定义 , 从 如 ,置信 水 平 
1 一 a 的 无 偏 置信 区 间 隐 ,外 称 为 水 平 1 一 a 的 UMAU 区 间 ， 车 对 
任何 其 辐 的 媳 信 水 平 的 无 偏 置 信和 区 间 [., 的 ] , 必 有 

Peo OIE) EO EOL SP OR) EP ET CK)), 

对 一 其 6 信和 gl1， 
从 引 理 .1.383 不 难 推 出 
引 理 二 .1. 和 和 .。 设 4 为 问题 
中 一 9 任意 二 二 98>06, Y 任意 
的 水 平 a 的 UMPU 检验 的 接受 域 , 而 集 人 8:zE 4(0)} 有 [( 玉 )， 
oo) 的 形状 , 则 如 为 8 的 置信 水 平 1 一 & 的 UAMU 下 界 ， 
同样 , 设 4(Bo) 为 问题 
= p 任意 《一 有 六 入 ,9 任意 
的 水 平 a 的 UMPU 检验 的 接受 域 ， 而 集 {:eE4C 有 多 (2)， 
0] 的 形状 , 则 丝 , 胡 为 8 的 置信 水 平 1 一 a 的 UAMU 区 间 . 

证 明 几 乎 是 逐 字 重复 引 和 .1.3 的 证 明 , 因此 从 略 

使 用 这 个 引 理 可 以 从 一 些 已 技 的 UMPU 检验 作出 UMATU 界 
和 UMAU 区 回 , 例如 : 根据 例 3.3.5 必 3.3.8， 得 出 ; 

a,， 车 下 1，…, 六 ,为 耻 自 丸 介 ,， 习 揭 ia 样本 ， 风 [至 一 
zg/ Vn， 攻 十 zg/ Mw] 为 8 的 水 平 1~a 的 UMAUD 区 间 . 


b. 车 耳 1,…, 了 4 为 取 自 六 (wo) 的 iid. 样本 则 o? 的 水 
平 1--g 的 UMAU 区 则 有 形状 


1 Six RL 
[去 辣 G 一 忆 二 让 一 冲 中 


其 中 ou0s 由 (3.3.65),(3.3.66) 决 定 (但 在 该 两 式 中 应 置 co 一 2 
水 平 1-a 的 UMAU 上 ,下 界 分 别 为 


起 此 定 尽 显然 出 适用 于 一 般 的 告 信 集 5 tx)。 
+ 


二 -在 厅 起 C 一 屋 )? } 及 -区 订 总 (一 及) * 


后 者 且 是 UMA 的 ( 见 铺 3.2. 急 。 对 均值 4 而 言 ， 例 4.1.1 所 求 
出 的 一 样本 本 区 间 (4.1. 国 为 a 的 水 平 1 一 a 的 UMAU 区 间 ， 而 


更 开 了 (四 及 吾 -- 工 _ St as(o) 分 别 为 a 的 水 平 1~a 的 


< < 
UMAU 上 、 下 界 ( 当 az 立时 , 且 为 UMA 上. 下界, 见 例 3.2.4 
末尾 处 的 说 明 ). 


co. 若 王 ，…， 琶 和 了 ，…， 了 us 分别 为 取 自 六 人 0 及 
下 十, oD 的 iid. 样本 ， 如 两 梯 本 信 区 间 他 .工人 的 是 5 一 < 的 置信 水 
平 1--a 的 UMAU 区 间 ， 若 上 述 两 个 正 态 总 钵 的 方差 不 园 面 依次 
为 号 和 oa 则 

mn - 1 用 
上: TE 1 nl > | 


Co 1 是 _ 2 C1 1 ne 本 3 
各 一 填 会 (全 全) m—1 2 X) 


为 - 哈 的 水 平 1-a 的 UMAU 区 间 估 计 ， 其 中 au ce 由 (8.3.69) 
确定 , 而 
1 
Pa nT Dx. Dr 
1 ”1 0 - py? 


把 


Fnila) no—l CF 


分 别 为 o2/o? 的 置信 水 平 L 一 a 的 UMAU 上 、 下 界 . 

根据 $ 383.83， 指数 族 中 的 一 个 参数 9 的 假设 9= 名 的 UMPU 
检验 存在 ， 且 当 分 布 连续 时 是 非 随机 化 的 ， 帮 如 果 与 这 种 检验 相 
应 的 置信 集合 有 区 间 的 形式 , 则 由 可 理 4.1.4 它 就 是 8 的 UMAU 
区 记 , 在 此 有 两 个 问题 需要 回答 , 一 是 在 分 布 连续 时 , 证 明 置 信和 集 
各 确 为 区 间 ， 二 是 分 布 离散 的 情况 可 用 随机 化 的 方法 转化 为 分 布 
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连续 的 情况 . 

第 一 个 问题 的 回答 包含 在 下 面 的 引 章 中 . 

引 理 生 .1.5， 假定 名 .三 的 分 布 族 为 {f (%, 四 8p}, 而 f(%， 
办 关于 “有 单调 似 然 比 ，( . 候 设 9 一 06 的 UMPU 检验 存在 ,有 
接受 域 Cr (bo 过 sz 科 Ca go， 且 为 严格 无 仿 的 , 则 O41 (四 和 020 
都 是 的 严格 增加 函数 . 

注 车 为 检验 问题 9EQn tpEGr 的 水 平 a 的 无 侧 检 验 ， 
B, (四 为 其 功效 函数 ， 若 有 ( 肋 > & 对 任何 9EG@r， 出 称 由 为 严格 
无 偏 的 , 

为 了 证 明 引 理 4.1.5， 我 们 首先 指出 ， 著 汪 (2) 为 一 实生 数 ， 
且 存 在 各 致 由) 所 0， 当 儿 过 vo， 汪 (9) 守 0， 当 zz0o， 草 当 
6 [是 人)] >0 时 ,对 任何 6s 放 抽 有 百 s 东 5)] 关 0， 事 实 上 , 必 
有 .ao 02) Gao g) 一 "<cc。、 因 车 不 然则 将 有 .Jo 0) =0， 
当 4& 关 30， 这 与 在 ( 人 2 的 性 质 及 召 ,,[ 沪 ( 下 )] >0 的 假定 不 合 ， 因 为 
在 集 S = {sw:f(w, 人 的) 一 0 flv, 00) > 中 上 有 fw 8/ 了 (x6) 
=co, 由 了 (wv 办 的 单调 似 然 比 性 质 , 知 集 S 全 在 点 mw 的 右边 , 故 
在 全 上 有 二 (2) >0, 而 


Baty EX) | 人 Fe fo, OV dp 


>| pF, oDdn+| oh OF bo Dap 
一 0 用 tw (A) 0. 
这 证 明了 上 述 论断 . 
现在 任 取 后 >06， 以 户 ( 信 记 58= 抽 品 8¥ 抽 的 UMPU 检验 
四 (有 接受 域 O1000 万 rw 丰 O580) 的 功效 函数 , i= 0,1. 出 由 各 
和 四 的 严格 无 偏 性 知 
Bo LP (7 | = B10) — B00o) B10) —a 
>0>a~ Bo ~ Bo lh) — polT)]. (4.,1.25) 
这 说 明 只 有 黄种 可 能 的 情况 : Cg <O(0 3 一 1 2 或 Oo 
>Custbu :4 一 1 3. 得 由 前 面 措 出 的 事实 易 见 后 一 种 情况 不 可 能 ， 
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因为 在 这 种 情况 下 , 函数 风 () = 和 (2) 一 pol) 显然 有 前 面 指出 的 
性 质 , 而 这 时 《4.1.25) 是 不 可 能 的 , 引 理 证 毕 ， 

因为 指数 族 是 单调 似 然 比 族 , 由 这 个 引 理 立即 弓道 , 如 全 广 的 
分 布 族 为 指数 族 

fs, 0, pd = O00, gexrp[oT (re) 十 oO] 

谭 估 ( 芝 ) 有 连续 分 布 , 则 由 引 理 立即 推出 置 榨 集 合 必 为 司 信 区 间 ， 
若 卫 ( 互 ) 分 布 不 连续 . 则 在 最 重要 的 情况 下 , T《X) 取 离 散 值 0, 
1, 32，…， 用 性 . 工 .24) 的 方式 将 其 连续 化 , 并 注意 出 此 得 到 的 分 布 
族 仍 为 指数 族 , 经 过 这 样 连续 化 以 后 引 理 4.1.5 仍 可 使 用 , 这 就 解 
梁 了 我 们 前 面 提 出 的 问题 ,应 当 指 出 的 是 : 即使 当 了 (了 斑 ) 的 分 布 是 
一 般 的 不 连续 分 布 , 仍 可 达到 同样 的 结论 , 当然 不 如 在 了 (于 ) 只 取 
0 1 2,，… 时 那么 简单 . 


《四 ) 置信 区 间 长 度 


我 们 前 已 指出 , 区 闻 佑 计 有 机 个 要 素 , 一 是 其 可 摹 诬 , 由 其 置 
信 水 平 表示 , 给 区 间 估 计 规 定 一 个 置信 水 平 , 也 就 保证 了 其 可 靠 度 
述 到 一 定 的 要 求 , 在 这 个 前 提 下 希望 愈 精确 愈 好 , 在 前 几 段 中 , 我 
们 是 通过 “包含 错误 愉 的 概率 ”来 剂 划 精确 度 的 , 换 铝 话说 , 当 参 数 
真 秆 为 6 而 人 天 8 时 , 要求 PoC 了 ) 所 6( 凶 )) 尽 可 能 小 ， 

一 种 更 富 直 观 性 的 刻 划 精确 庶 的 方法 是 考虑 区 疝 的 长 度 ， 比 
可 说 , 可 以 在 一 定 和 的 置信 水 平 下 , 变 求 置信 区 间 的 平均 长 度 僵 小 例 
好 , 这 丙种 刻 划 方 法 之 间 丰 在 一 定 的 联系 , 见于 下 面 的 避 理 . 

引 理 人 .1.6. 设 Bz2)5 8 的 置信 和 集 , 候 定 对 任何 2 S02) E 28， 
这 里 区 es 为 台 的 Borel 集 构 成 的 o- 域 , 设 避 是 ss 上 的 一 个 测度 ， 
则 

| ms (YaP, (wo) = fr (gr'ES(RYVAmON). (4.1.26) 


特别 , 如 果 由 任 一 点 0E6 所 成 的 集 { 人 的 mm- 测度 为 0 则 有 
[mtS YaPp, wy =| ,PrO' ES CK) dm), (4.1.27) 
注意 (1.27) 左 边 为 置信 集 S( 工 ) 在 mm- 测度 下 的 平均 大 小 ， 
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如 加。 [1 人 ( 王 ) 苛 ， 而 他. 工 .27) 右边 为 3(o) 包含 错误 值 的 概率 ， 
在 ?% 测 度 下 的 积分 值 . 
引 理 的 证 明 是 Fabini 定理 的 简单 推论 : 


[ m {US (2) 1a Po (2) -| [en dm (GD 1aP, Cw) 
一 | [ Taco APole) dm (en 


-| Ps(0' ES(R))dm(0). 


即 (4.1.26). (4. 1.27) 是 (4.1.26) 的 显然 推论 . 
特别 , 当 台 为 工 测 度 , 即 dm(9) 一 86 而 灸 (于 ) 为 区 间 多 (下 )， 
下)], 如 (4.1.27) 成 为 
WBE) -CD]=- POR) 0 BR)) 0 


应 当 注 意 , 虽 则 这 引 理 表面 上 是 对 单 参数 9 而 言 前 , 实际 上 对 
多 参数 分 布 族 {f(%, 0, P)dp, 《9g) 5 全 也 适合 tp 可 以 是 向 量 ， 
9 是 实数 ), 只 需 把 日 视 为 站 在 6 轴 上 的 投影 
由 这 个 引 理 立 即 得 到 下 面 的 定 再、 
定理 .4.8. 设 S( 四 为 8 的 属 信 水 平 为 I 一 “的 UNMAHU 置 
信和 集 , 则 对 任何 置信 水 平 为 1 一 “的 无 偏 轩 信 集 信人 o) 有 
可 [mtS (XT) BmAS XY. 
对 任何 9E@, 这 里 mm 为 绍 。 上 任 一 测度 , 且 
m({9}) 0, 对 任何 9E6. 
证 ， 由 假定 知 
天 人 ES EP ESCE)Y), 8. 
于 是 由 引 理 4.1.6 得 
Elm(S(X))] ~ PES(CE))am(g0 
<| Pel0' ESR) dm (0) = Bo lon (8 CE))]. 


定理 得 证 。 由 这 个 定理 可 知 ， 具 置信 系数 1- a 的 UMATU 区 间 的 
平均 长 度 , 在 一 切 具 同 一 置信 系数 的 无 篇 置信 区 间 的 平均 长 度 中 ， 
达到 最 小 值 . 


= 人 7 


区 间 估 计 的 无 偏 性 ， 是 从 “置信 多 间 和 包含 错误 值 的 概率 ”这 个 
概念 引 储 出 来 的 , 如 果 一 开始 就 以 区 间 长 度 来 衡量 精确 度 , 则 可 以 
提出 要 求 : 在 一 定 的 置信 水 平 之 下 使 区 间 长 度 的 平均 值 足 可 能 小 ， 
关于 这 个 问题 有 下 面 的 定理 . 

定理 和 . 工 .4 设 一 的 分 布 族 (Ps，8€ 加 的 参数 4 取 实 数值 
《 即 吕 为 单 参 数 )， 任 取 各 E86, 对 任何 中 EGG@ 以 4 人 仿 ) 记 检 验 问 
题 


= 和 一 > 站 一 总 
的 水 平 & 的 UMP 检验 的 接受 域 ?， 令 5S(2) 一 {8:wzE€ 4{ 的 }, 则 在 
8 的 具 置 信 系 数 1 一 a 的 一 切 置信 和 集中 ， Bo, [m{5 ( 玉 )]] 取 最 小 
值 , 此 处 ;为 8 上任 一 测度 , 致 s({ 维 ) 一 0 对 一 切 6E6. 

证 .4 (1) 当然 也 是 检验 问题 8 一 抽 <> 8 关 邦 的 一 个 水 平 a 
检验 的 接受 域 ,于 是 引 理 4.1.1 保证 了 (2) 为 8 的 一 个 具 铬 信 水 
平 1 一 a 的 置信 和 集 ， 现 设 访 (w) 为 8 的 任 一 具 辣 一 置信 水 平 的 营 入 
集 ， 而 定义 本 (的 ) ={w :和 EE 主 (0)}， 央 和 (91) 可 视 为 检验 问题 
8 一 抽 全 和 = 加 的 一 个 水 平 “ 检 验 的 接受 域 .所 以 因 4(90) 的 UMP 
性 及 引 理 4,1.6, 得 


Eo Lm{S CX)Y] -| , Pa (O01 € SCR)) dm C0) 


{1 


| oe} PelX EE AYN) dm (Bs) 
<|。 再 时 Pe (XEA (20) ) dm (tt) 


-| PC01€S(F)) dm(0) ~ Balmtd (XA)]. 

这 证 明了 所 要 的 结果 ， 

不 言 而 喻 , 定理 中 得 出 的 置信 集 8 人 与 负 有 关 , 因 此 ， 县 “一 
致 最 小 平均 长 度 ” 的 置信 区 间 一 般 是 不 存在 的 ， 然 而 , 这 个 定理 可 
以 硕 助 我 们 作出 局 部 最 小 平均 长 度 的 署 信 区 间 ， 如 果 我 们 寿 理由 
认为 被 估计 的 应 莫 在 菜 个 已 知 的 的 很 小 的 近 旁 , 按 定理 的 方 
式 去 作 区 间 信 计 可 能 是 有 利 的 . 

妨 当 抽 m4 时 ,可 任 取 4609) 致 Pa (ZE A90)) 一 1-a, 


sn BTT# 


例如 ,车 万 :，…， 在 s 为 取 自 交 塌 轧 的 通 . 样本 , 则 


[¥-- 了 + 六 | 
为 9 的 具 置 信 水 平 1 一 a 的 UUMAUT 区 间 ， 取 后 一 0、 注意 到 检验 
问题 9=9 103 9 一 6 的 水 平 a 的 UMP 检验 有 单 边 接受 域 ， 不 同 于 
9~B4 ee 8xb: 的 水 平 a 的 UMPU 检验 的 接受 域 ， 可 知 如 根据 定 
理 4.1.4 ( 取 名 一 全 作出 9 的 具 重信 水 平 1 一 “的 置信 区 间 ， 则 此 
区 间 在 9=0 附近 时 的 平均 发 度 将 小 于 上 述 UMPU 区 间 之 长 


< 然而 当 8 充分 大 时 ， 则 上 述 区 间 前 平均 长 度 将 大 于 


A 这 个 置信 区 间 的 具体 形状 的 导 求 留 给 读者 . 


设 变量 了 有 单 参 数 分 布 族 { 了 Ps，，60E 人 @， 在 不 少 情况 下 晶 有 
一 个 有 限 的 下 界 或 (和 ) 上 田 ; 为 确定 计 设 9C [0,， oo). 这 时 , 8 的 
置信 上 界 go) 的 精度 也 可 以 用 区 间 [0,8(w)] 之 长 即 了 5(w) 来 衡量 ， 
因此 有 理由 使 人 认为 ， 洪 6 (om) 为 8 的 具 置 信和 水平 1~~a 的 UMA 
上 界 , 则 五 [8《 王 )] 在 9 的 具 同 一 置信 水 平 的 置信 上 界 中 , 一 致 地 
达到 最 小 , 然而 , 这 个 看 法 是 不 对 的 , 问题 在 于 , 在 关系 式 


E,{m[d, FRY}= | P, (0' ES (ZX) m ag) 


+|,, Pe(0' ES CX)) md) 


的 右边 两 项 中 ， 按 UMA 置信 上 界 的 定义 ， 第 二 项 的 被 积 画 数 
Pol9' E58( 环 )) 固然 在 一 切 具 同一 置信 水 平 葛 置信 上 界 中 达到 最 
小 , 但 第 一 项 则 不 必然 , 因而 就 有 可 能 存在 6 的 某 一 具 同 一 置信 水 
平 的 置信 上 界 &(Z)， 使 对 某 些 2 有 
Befm[0, SCRYI} < Bm[I0, TY)Y. 

Madansky (1962) 提供 了 下 面 的 具体 例子 . 

钢 4.1.6. 设 1, …， 下 ,为 变量 斑 的 iid 样本 , 飞 的 分 布 
族 为 全 (ew, 的 dw 8>>j, 其 中 . 


“HT. 


~ 


1 负 
Fw py | 万 ex (-$), zw>0, 
0 ， 40。 
不 难 求 得 串 的 具 置 信 系 数 14-a 的 UMA 上 界 为 
Go ~2 TVA), 
而 
BBCR)] 2n0/xd, (i—m). (4.1.28) 
记 (3 pw， 元 的 有 序 样本 为 王国 宝 王 旬 安 实生 om 不 难 算出 
仿 呈 的 分 布 ， 


Pu( 3 > log 7) =I(n—itl, ,0<i<l. (4.1.20) 
这 里 六 人 的 为 不 完全 后 -函数 ， 
1 
Dp D-DDede [ora 
车 选取 二 使 (4.1.29) 右边 等 于 1 一 a 网 扣 人) = /og 二 为 6 的 
一 个 具 什 信和 系数 1 一 a 的 置信 上 界 ; 不 难 算 出 


1 t 1 i 
到 | Xiw/ log | -9 总 寺 和 Te 于. (4.1.830) 


Madansky 取 1 了 一 a 一 0.8, n 一 190, 4 一 0.99, 5 由 jo.ss (C121 一 各 人 
0.8 奖 定 ， 算 出 (4.1.28) 和 (4,1.80) 的 右边 分 别 为 0.9568 及 
0.8290， 这 样 , 我们 得 到 一 个 不 为 UMA 前 置信 上 界 ,在 平均 长 度 
最 小 的 标准 下 一 致 地 优 于 具 辐 一 置信 系数 的 UMA 置信 上 界 . 


《五 ) Behrens-Fisher 问题 


我 们 前 在 { 一 ) 中 已 提出 过 这 个 问题 ， 即 设 瑟 :，…， 互 。 利 
了 :5 …,， 了 分别 是 从 正 态 总 体育 (wi oD 和 次 (ea a 和 中 抽出 的 
ia. 样本 , 要 帮 一 wm 的 区 和 色情 计 , 这 也 可 以 提成 假设 答 验 问题 的 
并 式 , 邯 
Hiatt 在 :CH 到 人 9 


和 Ts 


a re :ui -本 PC - Mice vim 中 


《当然 世 可 以 提成 单 边 假设 的 形式 ). 

这 个 问题 是 Behrens 在 1928 年 的 一 项 工作 中 首先 提出 的 , 三 
十 年 代 中 ，Fisher 在 一 系列 的 工作 中 都 水 及 过 这 个 问题 , 特别 , 他 
把 这 个 问题 作为 他 的 “信仰 推断 法 ”的 一 个 重要 例子 ， 从 三 十 到 四 
十 年 代 , 对 这 个 问题 作 过 较 重 要 贡献 的 还 有 Weloh, Seheffe 等 人 ， 
自 那 时 以 来 直到 目前 , 这 个 问题 在 文献 中 不 断 地 有 所 反映 ， 

由 于 这 个 问题 在 实用 上 的 重要 性 及 其 在 估计 理论 中 的 历史 作 
用 ， 我 们 在 这 里 对 其 作 一 简单 介绍 ， 在 这 里 我 们 只 讨论 基于 
Neyman 的 置信 区 交 理 论 的 解法 , 关于 Fishar 的 信和 履 推断 法 到 下 
节 再 谈 . 

在 这 个 问题 中 一 共 涉 下 四 个 未 知 参 数 ，q，o3，mm，o 呈 ， 在 前 
面 我 们 考虑 过 3 一 o3=o? 的 情况 ,这 可 以 用 上 分 布 来 解决 , 然而 ， 
在 吗 积 咕 完 全 未 知 的 场合 , 这 个 做 法 就 行 不 通 , 诚然 , 若 记 4 一 了 
一 证 ， 他 一 Ga 一 全 我 们 将 有 


g=(d— 9/V 一 + 本 ~N(0, 1), 
但 如 将 qi, 中 分 别 以 其 元 以 估计 
起 1 & Ta _ 
忆 一 二 十 训 (一 全 训 一 一 
代替 而 得 统计 量 


i -0) /Yt+, (4.1.81) 


铀 了 并 不 服从 # 分 布 , 因为 两 个 独立 的 x 变量 的 线性 组 合 的 分 布 
《除非 系数 相同 )， 并 非 等 于 某 个 既 蛮 量 的 常数 倍 的 分 布 ， 实 际 上 
容易 见 到 ; 若 记 p 一 a?/o3, 开 一 各 /133 一 和 /ps， 则 

(da — 一 -2)12 
ss|(1+2)(1+- ro) 


然而 ， 此 量 让 涉及 到 炒 知 的 比 从 因而 无 法 由 之 作出 的 区 间 梢 
计 , 不 过 就 是 由 这 里 我 们 也 可 感觉 到 , 比值 p 在 这 个 问题 中 要 起 相 
当 芍 作用 ， 


= HBO" 


YD 


上 | 


t ~ tn +m-2(4.1.32) 


然而 , 我 们 可 以 提出 问题 : 是 否 能 适当 地 修改 (4.1.31) 中 记 定 
义 的 六 使 之 服从 二 分 布 ? 由 于 二 变量 是 由 独立 的 正 态 变量 和 4 
变量 的 平方 根 之 比 所 产生 ， 而 正 态 变量 的 线性 组 合 仍 为 正 坊 ， 入 
变 曹 则 由 正 态 变量 的 二 次 型 记 产 生 ， 我 们 自然 地 考虑 将 天 修改 为 
下 面 较 一 般 的 形式 ， 


二 (D0) /VAR. 
其 中 ， 


1° L 汶 及 ry 在 wy 了 :1， "ny PF,, 的 一 绕 性 组 合 (系数 已 知 ) 
(D0) =5 对 任何 后 ， mo 而 Var(D 记 为 六 = 一斑 (cp oD 
2° & 为 到 bb "yy 及 my Ys, "my YF, 的 一 个 二 次 型 (系数 矩阵 
已 疤 ), (@/TD ~ 并 对 某 个 已 知 的 上 及 任何 my， 0s, om 3 且 五 和 
包 相 互 独立 ， 
另外 , 从 直观 上 看 , 样本 三 1，… 了。 的 次 序 与 了 1,…, 了 的 
次 序 不 应 在 问题 的 解 申 起 任何 作用 ， 因 此 ， 下 面 的 要 求 也 是 自然 
的 . 
3 ”了 和 人 妨 对 每 一 组 变量 王 ，…， 开 和 了 ，…， 了。 都 是 
对 称 的 . 
Soheffe 在 1944 年 证 明了 一 个 有 趣 的 结果 , 即 
定理 和 4.1. 把， 适合 上 述 三 个 条 件 的 五 @ 不 在 在 . 
证 .由 工 ,@ 的 对 称 性 的 假定 38° 易 知 它们 必须 有 下 面 的 形状 : 
L~ad Xto Sr, (4.1.88) 
Qo To 训 芝 :s 
to Tito YL, tT (4.1.30 


这 里 甸 ~60r 都 是 已 知 的 (与 wt， 03, 品 无 关 的 ) 常 数 . 
由 性 .1.33} 得 ECD) 二 cod 十 coneatiy, 另 一 方面 ， 根据 条 件 工 ， 
应 有 五 (DD = 一 o， 六 此 
HM 于 十 加 ?2 We 一 可， 出 一 茹 cg, 
1 1 
这 导致 = -3 a! 而 = 了 一 于 4、 从 而 


a HT» 


var(D = 一 于 + 站. 
3 ne 
再 由 QIV~ 驻 得 i 
B(Q) -对 全 十 全 人 
另 一 方面 , 由 《4.1.84) 得 
BO) =0eym (oF oD 十 corn (ad 一 二 4 
十 poor 十 G 鸭 -etaa (na— 1) B+ omanoahaa. 


比较 此 两 个 召 全 ) 表达 式 中 之 系数 ,得 
2 人 
ca~k/ni, 0 By % /na, 


“sD “0 
因此 得 到 Q- 太 总 + 总 ) 
这 样 , # 回复 到 最 初 的 而 后 者 我 们 已 知 , 不 可 能 对 一 切 o3 和 o3 
有 中 心 # 分 布 ,定理 证 毕 . 
有 兴趣 的 是 : 如 果 不 坚持 条 件 8", 则 满足 条 忻 1*.2° 的 五 8 
能 找到 , 这样 我 们 可 以 定 出 一 个 精确 地 具有 指定 置信 系数 1 一 a 的 
mm 一 qo 的 相似 置信 区 间 ， 诚 然 ， 问 题 的 这 种 解决 终 因 缺乏 条 件 3° 
中 所 指明 的 对 称 性 而 旦 得 不 大 自然 . 
为 此 我 们 不 失 普 遍 性 地 假定 知 <sra， 并 定义 
到: 一 一 站 cx 了 号 一 了 “2 (4.1.85 
我 们 希望 找到 完全 已 知 的 ( 即 与 参数 ,gs, 03, 品 无 关 的 ) cw 满 
足 条 件 . 
疡 ul 名 一 二 "Ns 
六 = 1 与 无关); (4.1.36) 


cu 一 0, 名 下 一， 


如 果 这 样 的 ou 能 找到 ， 则 由 (4.1.35) 定义 的 阮 :。…， Ws 满足 条 
件 ， 


+ 8383 。 


a 
re 


1° Wi, ”3 WW, 相互 独立 . 
2° Wi~N (aa, 00, $=1, + mu, 0 0+ od, 


于 是 , 若 记 了 ~ 评 一 工 - 思 本 ,及 @- 二 芒 O7 一 巧 " 则 将 有 


一 (LT— (m8) /VO tm D) ~ i (4.1.87) 
因而 得 到 wz 一 az 的 置信 系数 1 一 a 的 相似 置信 区 间 


[2 EE) 


(4.1.88) 


以 二 记 区 间 ( 人 .1.88) 的 长 , 不 难 算出 


AVI /2 把 a\, 
ED TL) J () 人 (4.1.89) 
因此 , 希望 9 尽 可 能 人 小, 由 于 =03 二 003 而 oa 吐 为 未 知 参 数 ， 
放 癌 题 归结 为 在 满足 (L.1.86) 的 条 件 下 使 c* 尽 可 能 小 ， 下 面 我 
信 证 骨 : 
引 理 生 .1.7(Scheffe) ， 由 下 式 定 义 的 ct 


1 1 ， 
Ou— MT/ na et na 划一 工 Vs 

+ j=1 ji 产生。 .1.40) 
Ci ne Na? 了 了 一- » Ta, 4 : “ 
ery 一 - 元 了 一 1 十 卫 ， = 


满足 (和.1.836) 目 使 扣 达 到 其 最 小 值 由 /ma 
证 ， 出 (4.1.40) 定 义 的 ow 满足 性 ,1,86), 以 及 相应 的 0 一/ 
ms 两 点 ,很 易 验证 , 问题 在 子 证 明 这 样 得 出 的 oe 的 极 小 性 ， 为 了 证 
明 这 一 点 , 记 
人 一 《er my CH 本 1 3 Fly 
e— (1, +**, TY", 
则 0 cn 两 两 正 奖 且 长 崩 为 因此 可 将 其 补足 为 徊 维 欧 氏 


空间 的 正 交 基 Bap my Cmy Tmt+ils “*"s Cm. 此 处 Cn+- “yy Cns 之 长 也 
取 为 6, 于 基 可 将 e 表 为 


6 一 8 的 0 十 … 十 多 sr- (4.1.41) 
”再 和 用 we 一 1, 3 一 1, …, m， 得 
C= 1 1 (4.1.42) 
于 是 9z 一 2E 一 王 (天 十 … 十 下 ， 
而 由 (4.1.42}, 得 
ma2202( 闻 十 … 十 给) 一 于 , (4.1.49) 


这 证 明了 em ， 引 理 得 证 
出 引 理 证 明 过 程 可 知 ， 要 性 .1.43) 成 立 等 导 ， 必 锋 使 表达 式 


针 江 .和 4) 中 的 gi 一 … 一 gn 一 0. 

由 ( 生 .1.40)，(4.1.85), 得 到 

| _ Wl 173 1 
Wi= 芳 (2) ee YY 
于 大 得 到 
wD? ?3 

i [CRP) ~ mad/N ~ 414 
其 中 

Wi 一 证 一 Ce ‘(4.1.4 


一 开始 给 人 的 感觉 是 ， 这 样 得 出 的 置信 区 间 可 能 没有 充分 利 
用 样本 中 的 信息 ， 因 为 得 出 的 统计 量 (4.1.44) 的 自由 度 只 有 
min (tu ma) 一 圭 而 样本 总 数 为 由 -十 ma。 然而 ,计算 卖 明 : 在 某 种 意 
尽 下 { 详 现下 述 ) 这 个 情 计 前 效率 足够 好 . 

因为 = 中 十 3 而 人 一 wy /rz, 由 过.1.89), 得 


(全 写 ) 2 yf 1 9 
了 BY ret Ey J bY ot . 
一 方面 ,如果 p=o3/03 已 知 , 则 可 以 利用 (4.1.32) 作 出 一 as 的 


+ S84， 


TP 


置信 系数 1 一 e 的 相似 置信 区 提 ， 此 区 间 之 长 若 记 为 态 出 易 见 、 
Vr (1!) 


Fa 


史 于 怠 1 
bi i 林 j yoi 十 一 ao 
Vm ina “+ na 


El)= 


从 而 得 到 


,ne 
7) 


Seheffe 对 1 一 x= 人 .6 和 0.99 及 某 些 mm， 进行 了 计算 ,结果 


1.88 |1.27|1.36|1.42 |1.47 


从 这 些 数字 ， 考 虑 到 召 (0) 是 在 o2/o3 已 知 时 的 区 间 长 度 平 
均值 , 应 该 说 ,Seheffe 所 提供 的 上 述 解 法 有 足够 好 的 效率 . 

除了 上 述 Soheffe 提出 的 “精确 ”解法 (此 处 “精确 ”一 词 的 含义 
是 : 出 之 作出 的 置信 区 间 具 有 指定 的 置信 系数 ) 之 外 , 一 些 作者 提 
出 了 种 种 近似 解法 ， 前 面 已 指出 过 一 种 基于 中 心 极限 定理 的 较 乌 


a 


赂 的 解法 , 1938 年 ， 鸡 elobh 研究 了 由 (4. 工 .3 四 定义 的 统计 量 纪 他 
得 出 : t 的 分 布 近似 地 与 具有 zz 个 自由 度 的 中 心 了 分 布 相同 ， 这 
里 3 


2 卫 1 
一 ( 色 + 训 ) /wey+ nz ns— 1) ) (4.1.46) 
PP 一 03/ 呈 之 值 可 用 从 样本 估计 得 的 值 代 替 , 进一步 研究 表明: 用 这 
个 近似 方法 作出 的 区 间 估 计 与 Seheffe 的 “精确 解法 相去 不 远 . 
1960 年 , Banerji 提出 一 个 近似 区 间 估 计 
(一 了 十/m 十 得 人 /poyt3， 
此 处 如 = 而 1 0/ 多，43= 二 1, 2, 而 寻 和 43 分别 为 of 和 ce 的 无 仿 
估计 二 T 宫 (一 局 ?及 二 = 加 G 一 尺 * 这 个 近似 解法 
的 特点 是 ， 对 有 限 的 和 和 ”wa， 区间 包 含 未 知 的 sa 一 aa 的 概率 ， 总 
不 小 于 指定 的 1 一 a 


(六 ) 容 丽 区间 (Toleranoe interval) 和 容 恶 跟 (Tolerenoe 
limity 

这 个 问题 与 区 间 司 计 有 密切 的 联系 ， 扬 以 我 们 把 它 放 在 这 一 
节 里 面 . 

设 ( 一 维 ) 变量 于 的 分 布 函 数 Fs(w) 依赖 于 参数 8. 我 们 希望 
找到 一 个 区 间 [&, 站 , 它 包 会 了 至 全 部 概率 (100 吕 ) 中 的 100B8 入 。 
即 (2 一 Pot) = 8B, 如 里 已 知 因而 了 Fs(2) 已 知 ,我 们 当然 可 以 
选 出 很 多 这 样 的 [4, 时， 但 车 未 知 , 则 这 样 的 fa, 外 内 能 通过 样 
本 去 估计 , 设 1, …， 子 ,是 变量 五 的 iid. 样 本, 希望 定 出 两 个 函 
数 了 (9) 二 T 了 (mi =1, 2, 名 Fo[Ts (1 一 Fo[T (8)] = 
局， 然而 , 既然 Ti 的 ，Ta( 是 由 样本 定 出 ， 我 们 不 能 要 求 对 一 切 
样本 zz 总 有 oT3(2)) 一 Fel 了 (2)) 一 有 ， 而 只 能 要 求 这 事实 以 一 
定 的 概率 或 立 , 于 是 得 到 下 面 的 定义 . 

定义 4.1.6， 设 变量 卫 的 分 布 丽 数 为 Fs (2)， 8E8， 设 荆 ，， 


让 + 不 为 整数 时 , ty《m) 之 入 可 在 分 布 表 上 用 线 社 插值 法 求 得 。 
"3 


“…， 卫 为 变量 四 的 iia, 样本 , (0) 一 个， 0) ， 人 一 1 和 2, 
为 两 个 统计 量 , 满足 条 忻 和 多) 所 ai) 对 任何 = C8， 
县 
Pel FelTat TX, rp 王 )) — Fo CT Cm, Sy 2 ) 之 BB} 庆 Y. 
(4,1.47) 
这 里 0<<B8 过 i, 0<y<IL， 则 称 [ 72] 为 总 体 分 布 了 olm) 的 6- 容 
量 的 7- 容忍 区 间 , 简 记 为 (8, 7)- 容 护 区 间 ， 
类 似 地 可 以 定义 (2, 力 - 容 忍 上 限 工 和 (8, 四 -容忍 下 限 工 ， 
它们 分 别 由 将 (4.1. 和 9) 让 为 
Pe{Fo(T (HL, +, I)) BA} (4.1.48) 
及 
PelFo TT, ~ FN) SE BPY (4,1.49) 
向 得 到 . 
不 难看 到 :; 容 丽 限 与 冒 信 界 有 密切 联系 , 为 此 , 定 站 全 人 和 和 
Es 四 分 别 为 使 Folw) 一 B 成 立 的 最 小 和 最 大 的 x( 为 说 衣 方 便 计 ， 
此 处 假定 Fs (2) 为 zw 的 连续 机 数 ), 则 显然 ,二 为 三 ,的 (从 , 放 -容忍 
上 限 的 充 要 条 件 , 就 是 于 为 6500) 的 置信 水 平 为 7 的 置信 上 界 , 并 
为 本 的 (9, 总- 容 丽 下 限 的 完 要 条 件 为 全 为 64s( 四 的 置信 下 界 ， 
这 祥 可 灸 把 前 面 求 填 信和 界 的 方法 用 于 求 容 如 限 , 比方 说 , 可 以 引进 
如 下 的 概念 . 
定 广 生 . 王 .他 设 轩 = 于 (卫生 为 Fs 的 一 个 (9, )- 容 
于 上 限 ,车 对 任何 其 它 的 (8, 旋 - 容 于 上 限 和 全 和 B' 沁 B, 必 有 
Po{ Fe CI CRs, ~ RA ) BP} PAB (TRY, Fw) I A'), 
(4.1.50) 
则 称 他 为 了 ,的 一 致 明 精确 的 (8, -容忍 上 限 (UMA (68, 7)- 容 
忍 上 限 ). 
完全 类 似 地 定义 UMA (6, 六 )- 容 现 下 限 . 
定理 .1.6. 设 玉 的 分 布 为 他 Fo(2) = 了 加 全 dn) ,09€9), 
8h， 而 了 lw, 及 有 单调 似 然 比 , 设 下 ,，…:， 于 ,为 变量 的 
iia 样本 ,车 2 一 玉芝) 和 开 =5(ZEu 三 分别 为 的 


置信 系数 为 ?的 UMA 置信 下 、 上 界 , 则 所 -e( 纪 和 名 的 分 别 为 
Fs 的 UMA(B, 加 - 容 沪 下 .上 上 限 . 

证 .我 们 就 上 限 的 情况 米 证 明 ， 因 为 下 限 的 证 明 是 完全 一 样 
的 、 

首先 , 容易 验证 , 6&5 (四 为 Bs 的 (6, 旋 - 容 昼 上 限 , 现 设 T' 为 
任 一 48, )- 容 矶 上 限 , 定 出 兴 ， 臻 

上 一 于 
则 少 为 如 的 置信 水 平 为 > 的 蛆 依 上 界 . 任 取 8，1> 局 >、 由 
了 tw， 从 有 单调 似 然 比 ， 根 据 引 理 3.7 .2 可知， 着 对 任何 9 定义 六 
致 
Ee 6) =ép 0), 
则 六 >8， 我 们 有 
PT AOT' SE 0) © TE (0) 
OE PEés ON) OF, 

同样 Pota(D) TB OE DD >és 0) © Bp, 
于 是 

Po{ FT 8'} = Po (O26), (4,1,51) 

PA Felés DD) 8'} -PP 的. (4.1.52) 
由 于 名 > 而 5 为 68 的 水 平 7 的 UMA 登 售 上 界 ,而 纺 为 的 一 
个 水 平 y 的 妖 信 上 界 , 有 

Po 0) > PG0", (4.1.53) 
于 是 由 (4.1.51) (1.53) 得 (4.1.50)， 对 任何 局 ，1> 司 > 有 成 
立 , 四 此 对 局 = 二 也 成 立 , 定理 证 毕 . 

在 以 上 的 证 明 中 我 们 默认 了 斑 的 分 布 琴 数 的 连续 性 , 采用 以 
前 指出 过 的 随机 化 方法 ,可 以 免除 这 个 限制 , 在 应用 上 ,一般 宁肯 
适当 调整 8, > 之 信 , 而 避免 使 用 这 个 随机 化 . 

根据 这 个 定理 ， 前 面 关于 UMA 恒信 自前 例子 ， 都 可 以 转 到 - 
UMA 容忍 跟 的 情 说 , 此 处 不 重复 有 关 的 计算 了 ， 

另 一 个 关于 和 容 肢 限 的 最 优 性 准则 , 可 以 队 置 信和 园 理 论 中 “ 平 雹 
长 度 最 小 ”这 个 准则 类 推 耐 得， 比方 说 , 设 王 为 共 取 非 负 值 的 随 视 
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变量 , 则 我 们 可 以 提出 问题 ; 在 Fs 的 一 切 (8, 切 -- 雁 忍 上 眼中 找 出 
一 个 ZT 使 对 Fs 的 任何 (8, 办 - 容 恺 上 限 T* 有 

[7"]>BotT], 对 一 切 9€8 
对 容忍 区 间 而 言 , 不 论 芯 是 否 到 非 负 值 , 都 可 以 提出 使 容忍 区 间 平 
均 长 度 达 到 最 小 的 要 求 , 然而, 置信 界 和 置信 区 间 的 理论 不 能 对 这 
个 问题 有 多 大 帮助 , 因为 如 我 们 所 见 ，UMA 置信 界 不 必 使 平均 长 
度 达到 最 小 ， 而 UMAU 置信 区 间 虽 则 (在 一 切 无 偏 置信 区 间 中 ) 
使 平均 长 度 达 到 最 小 , 但 "“ 始 信 区 癌 平均 长 度 最 小 ”与 “容忍 区 间 平 
均 长 度 最 小 ”是 两 个 不 同 的 问题 

关于 求 容忍 区 间 的 问题 , 下 而 的 引 理 不 失 为 一 个 方法 ; 

引 理 4.1.8， 若 2 和 了, 分 别 为 丽 的 《二 二 上， 二 二 世 广 容 


2 
恺 上 下限, 则 [2 全 中 为 Fo 的 (8, -和 容 肌 区 间 ， 
证 明基 显而易见 的 », 
在 变量 工 为 一 维 时 的 容 肌 区 间 的 概念 , 以 自然 的 方式 推广 到 
龙 为 和 多维 时 的 容忍 区 域 (CToleranee region) 的 情况 ， 


《七 ) 基 于 次 序 统计 量 的 容忍 限 与 容 六 区 间 


如 果 三 的 分 布 族 依赖 若干 个 实 参 数目 有 较 好 的 数学 性 质 , 则 
有 时 可 以 利用 这 种 性 质 造 出 较 精 的 容 她 限 和 区 间 ， 前 面 的 定理 
4.41.6， 及 下 自 中 将 讨论 的 正 态 分 布 的 容忍 区 则 问题 , 就 是 这 方面 
的 例子 . 

时 常 , 我 们 对 去 的 分 布 只 知道 某 些 很 一 般 的 性质， 例如 分 布 
函数 连续 或 绝对 连续 之 类 ， 而 对 其 数学 形式 则 元 任何 特殊 性 质 的 
假定 , 这 类 问题 叫做 “ 非 参数 "统计 问题 ， 它 是 本 书 第 六 章 的 主题 ， 
在 这 里 我 们 讨论 在 这 种 非 参数 性 假定 下 求 容 异 限 和 容 忍 区 间 的 问 
题 , 所 得 出 的 方法 适用 面 广 县 较 易 计算 , 但 如 将 它 用 到 某 种 其 数学 
形式 更 确定 的 分 布 族 时 , 则 往往 失 之 过 粗 . 

更 具体 地 , 设 总 为 一 个 一 维 变 量 , 其 分 布 函数 了 (多 只 知道 是 


”这 个 方法 的 摧 点 是 往往 失 之 过 粗 。 


ss 


连续 的 , 其 它 一 切 未 知 , 设 卫 !,，…, 亨 。 为 五 的 记 . 样本 , 现在 要 
报 据 这 个 样本 作出 五 的 分 布 玉 的 容忍 限 和 容忍 区 间 . 

以 下 仙鹤 王 轴 袜 … 裤 下 二 记 三， 下 ;的 次 序 统计 量 ， 直 
观 地 看 , 在 区 闻 [ 屋 tp， 互 ip] 中 大 致富 有 zx 的 全 部 概率 (100 镶 ) 的 


4 x100%. 这 个 启发 性 的 想法 使 我 们 提出 , 这 样 前 区 得 [ 瑟 w， 


了 oj] 通 当 地 选择 多 为 可 能 作为 玉 的 8, 力 - 容 忍 区 间 , 同样 , 适 
当地 选择 ,可 能 使 全 om 能 作为 五 的 (B, 加 -容忍 上 、 下限 ,为 此 
竹 要 计算 概率 
Bt) = PrtF (ID) — F(R 8}, 
Pe) = Pp{F (Xm) 8B} (4.1.54) 
ein 工区 下 0<B<D). 
这 里 Pr 《正如 以 前 常用 的 Pe) 表示, 事件 的 概率 是 在 开 的 分 布 为 
全 之 下 算出 的 ， 补 一 君 使 人 认为 避 .1.54) 中 的 概率 应 与 了 有 关 ， 
但 不 难看 出 其 实 不 然 , 这 个 事实 正 是 这 方法 的 基础 . 
为 了 证 明 (4.1.54) 中 的 概率 与 改 无关， 锁 用 引 理 8.5.38， 出 
这 引 理 知 ,车 互 前 分 布 为 加 (连续 ), 则 瓦 ( 互 ) 一 如 介 , 1)， 由 此 本 
知 | 于 ( 革 a)， ;下 (了 (mw)) 在 概率 分 布 上 ,与 由 瑟 避 , 了 中 抽出 的 
大 小 为 中 的 jia. 样本 的 次 序 统 计 车 避 志 Us 二 … 0 完全 无 异 . 
由 此 得 到 | 
PB 一 PC 一 人， mB = PPO). (4.1.565) 
这 不 但 证 明了 Pw (4B), pw U8) 确 与 户 无 关 , 县 提 供 了 计算 它们 的 方 
法 , 因为 (C01, …，0s) 的 密度 函数 (对 Bs 中 的 工 济 诬 ) 为 ni1dw… 
Gin 当时 1， 其 它 处 为 9 不 难 算 出 UU; 的 密度 为 
(i 


OE Go 0<w<l， 他 处 为 0 


即 UU 服从 B- 分 布 BC % 一 上 十 1) ( 见 例 2.3.2), 而 (D,, 吕 ) 的 密 
度 为 


+ B90# 


he A re rn en 


人 加 -nD hi) 和 (一切 


ji 一 
( 当 0<usv&1, 他 处 为 0， 又 此 处 1<&i<j<). 
例如 ,要 求 出 及 (WD), 须 将 1dure…dun 在 0 委 帮 匀 轨 志 所 
UE 各 分， 类 似 地 
对 fulw 从 这 个 虽 繁 但 不 难 的 计算 留 给 读者 ， 在 $ 6.1 中 我 们 
将 指出 一 个 较 易 的 推导 法 , 可 作 人 参考 , 从 (Ui, DD) 的 联合 分 布 不 难 
算出 Way=U—U, 的 分 布 ， 结果 是 
Wy~B(F—%, wn—j+t+D). 

利用 所 得 到 的 Us 和 Wy 的 分 布 , 立即 得 到 

Pr{F (Xm) > B= PU BA) 


-ff du 1 Io n—k+). 


此 处 T( 2 们 为 不 完全 8- 函 数 , 见 例 4.1.6. 挑选 最 小 的 使 
y=—1— Totk, n—k+1) Pr， (4.1.56) 
则 入 wm 为 也 的 (8，Y) -容忍 上 限 , yy。 这 通常 要 借助 于 不 完 
全 -函数 表 ， 车 对 茶 个 “满足 (4.1.56) 的 根本 不 存在 , 则 必须 
加 大 ”才能 使 问题 有 解 , 用 完全 同样 的 方式 可 定 出 容 型 下 限 开 ww 
这 归结 为 找 出 最 大 的 m, 致 
y= Tasom, NR—mt1) Py. 1.57) 
同样 , 若 对 某 个 ”满足 (4.1.57) 的 m 不 存在 , 则 必须 加 大 n, 才能 
使 问题 有 解 . 
同样 ,寻找 也 的 (8, 力 - 容 忍 区 间 归 结 为 定 出 色 j(1<i<j< 


增 , 臻 , . 
y=1—Is(f—%, 外 一 j++¢o+D) ry, (4.1.58) 


且 使 7 尽 可 能 接近 7， 一 般 , 常 取 j 了 一 nn 一 $ 十 1， 这 时 (4.1.58) 转 


化 为 ， ， 1 
yl 一 Js(n 天 1, 2 和 >>. (4.1.69) 


因此 需要 选择 4 尽 可 能 大 , 使 他 .T.59) 成 立 , 而 以 [下 mw， 也 ci 
作为 了 的 容忍 区 间 ， 如 对 某 个 适合 (4.1.59) 的 $ 不 存在 ， 则 必 
须 加 大 %. 
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(/ 正 态 分 布 的 容忍 限 与 容忍 区 间 


设 了, *…， 玉 ,是 不 ~ 入 (4 om 的 授 . 样本 ，g 和 oo? 都 未 
知 , 要 作出 8, 力 - 容 妨 限 与 容忍 区 间 

先 讨论 容忍 上 腿 的 问题 , 车 以 Fw) 记 育 (4 co 的 分 布 函 
数 , 则 有 

下 十 四 -Am 一 有 0<B<1, 

zu 由 于 (zo) 一 一 & 决定 , 因此 , 求 容 妨 上 限 的 问题 或 客 或 少 与 估计 
4 十 后 -so 的 问题 相当 ， 后 者 的 一 个 自然 的 估计 量 是 鸡 一 到 十 NS， 
此 处 ?一 -二 名 ( 蔗 :~ 于) 而 和 >0 待定 , 因此 我 们 就 来 寻求 
形 如 到 的 容忍 上 限 , 因为 

Pao (Pos E+ADN SH = PP, (+NS a +e0) 


-Pu 人 (> Vm ). 


但 是 "(Fm-e0) fs, 
其 中 3= 一 wa -sa~ MW%zs， 于 是 , 寻找 (8, -容忍 上 限 的 问 
题 归 结 为 决定 和 致 
Pl,m — VRN =7Y, 

这 需要 非 中 心 分 布 表 。 得 到 入 后 ， 即 以 王 十 5 作为 容 和 妨 上 限 ， 
虽 前 已 对 一 定 范围 的 m 有 B，?7 造 出 % 的 表 , 根据 对 称 性 , 不 难看 出 
08, 力 - 窜 好 下限 为 全 一 58. 

现在 考 卢 求 六 wm 9 的 容 肪 区 则 的 问题 ， 自 然 地 ， 我 们 取 
外 一 NS 三 十 X50 的 形式 作为 可 能 的 解 。 给 定 By 后, 回 然 可 以 
报 据 引 理 4.1.8 和 上 面 关 于 容 焉 限 的 结 昌 来 定 X， 但 这 样 敬 是 不 
糖 的 (具体 说 来 , 这样 得 出 的 和 容 丽 区 间 的 y 出 预定 的 7 天 )， 下 面 
的 解法 是 Wald 和 olfowitsz 提供 的 


证 A( 玉 ,5, ho) ee 


二 BOD 


作 变 数 代 换 交 = G3 一 @)/o, 不 难看 出 4{ 卫 , 太 , ,4 四 的 人身 布 与 
4 和 和 总 无 关 , 故 不 失 普 记性 可 到 a=0,o==1, 且 记 4(X, 5, 和 ,0,1) 
为 4 人 促 , 5,， 和 ， 现 在 要 决定 %>0 致 
PlACE, Ss, 种 字 户 =， 

这 里 概率 是 在 &=0, o=1 的 条 性 下 计算 的 . 

由 于 4( 下 , 8, 和) 是 驴 的 严格 增加 函数 ( 当 和 >0 时 ), 存在 唯 
一 的 3=Sx 至 4( 字 , 3, 3, 光一 B， 不 难看 出 ,X55,7 与 入 无关 
因而 可 记 为 "(是 }。 实 际 土 , "(是 ) 是 一 个 由 方程 


ET arp 
所 确定 的 量 ,由 
A(R, 5S, NBO S58. 


及 旦 与 上 的 独立 性 知 ,在 给 定 福 时 , {d4( 豆 ,局 为 宇 册 的 条 件 概 
率 是 
PlA(E, 8, WN >B|E) =P(S>r (T/A Y), 
出 于 nm 一 了 5S2~ 属 1， 右边 的 条 件 概率 可 用 xz, 分 布吉 时, 再 对 
息 求 均值 即 可 算出 P(4>> BB), 然后 根据 使 之 等 于 的 条 件 决定 入 
由 于 P(4zB) 的 解析 吉 达 式 不 易 求 得 ，Wald 和 Wolfowitz 提出 
了 如 下 的 近 伺 解法， 作 Taylor 展开 : 
Pld>B|E}= PABIOD +P'(A>B10) 


+ pr(4>2BI0) + (4.1.60) 


易 见 P(4>>B10) 一 0 而 石 (于 一 圭 , 于 是 得 到 
P(A>P) “P(A>BIO + P" (A2BIO + (4.1.61) 
比较 仁 .1.60}) 和 人工. 61), 得 
PU>B P(A28 5) )-P(x 
而 了 (- 所 ) 由 关系 式 


"B93# 


tr a meme 
a 


[ (CS) 1 
G3 YE 


) 后 , * 由 关系 式 


et=B (4.1.62) 


决定 定 出 7( 二 = 


Pi> mn—Dr’ (地 / ) =-y (4.1.69) 
决定 , 因此 , 求 和 tm, o9 的 C8, 力 容 斑 区 间 的 步 贡 归结 为 : 
1 

a 由 (4.1.62) 决 定 7 (=) 

b， 几 他.1.6 的 决定 和 

ce。 其 [ 芝 一 XS, 下 +XS] 作 为 容忍 区 间 
Wald 和 Wolfowitz 证 明了 , 这 个 近似 解法 (近似 性 表现 在 取 PC4 
> 有 了 (4 之 B|)) 即 使 当 n 一 2 和 一 y=0.95 时 ,也 与 真实 
信和 极 接 近 ,， 在 实际 应 用 时 可 使 用 有 关 的 统计 表 ， 它 把 入 列表 为 
有 7 的 函数 ， 


Bayes 方法 也 可 以 用 于 求 容 妨 区 间 的 问题 ， 这 里 不 仔细 讨论 
了 . 


§4.2. Bayes 方法 和 信件 推断 法 


”在 4.1 中 我 们 介绍 了 区 间 佑 计 理 论 的 主要 部 分 一 一 置信 区 
间 理 论 , 本 将 简要 地 介绍 其 它 某 些 观点 . 


(一 ) Bayes 方法 


如 在 人 4.1 中 指出 的 , 在 Neyman 的 置信 区 间 理 论 中 , 参数 8 
就 是 一 个 通常 的 末 知 数 , 不 带 任何 随机 性 ,所 以 , 像 “[8( 蔬 ),B( 斑 )] 
包 合 8 的 概率 为 1 一 a” 这 样 的 断 育 ,是 指 当 下 随机 地 取 值 时 ， 随 
机 区 阅 但 (了 Z), 了 5( 且 )] 包 含 因 定点 8 这 一 随机 事件 的 概率 为 1 一 a 
而 并 非 指 8 作为 一 个 随机 变量 落 在 区 间 [ 虽 CX)，5CX)] 内 的 概率 
为 1 一 a. 


[和 


如 在 82.3 指出 的 ，Bayes 理论 的 基本 出 发 点 是 , 把 8 与 下 一 
样 看 成 是 一 个 有 一 定 分 布 2 吾 (0) 的 随机 变量 , 4 瑟 ( 纺 这 个 分 布 总 
结 了 我 们 在 作 试验 (以 取得 样本 切 前 对 和 的 了 解 ， 因 之 称 为 8 的 
先 验 分 布 ， 所 以 在 Bayes 理论 中 ， 整 个 统计 问题 的 完整 描述 是 
多 sx Be 上 的 概率 测度 8 瑟 ( 扑 4Pe(w), 而 Ps(w) 不 过 是 在 给 定 引 
时 下 的 条 件 分 布 , 这 个 条 件 分 布 的 作用 只 在 于 , 当 有 了 样本 = 后 ， 
它 把 原来 的 先 验 分 布 @ 百 (人 转换 为 后 验 分 布 , 4 吾 (012), 后 者 总 
结 了 在 原来 的 知识 4 如 (9) 和 新 的 信息 4 的 基础 上 , 目前 我 们 对 8 
的 全 部 了 解 ,一切 关于 8 的 推断 全 依据 这 个 分 布 作出 , 对 Bayes 论 
者 而 言 , 在 得 到 & 日 (91m) 后 ,原来 的 d 瑟 ( 提 已 经 严 失 了 它 的 意义 ， 
因此 , 像 ' 一 个 随机 区 间 包 含 某 个 固定 的 参数 值 go” 这 样 的 事件 , 在 
Bayes 论 沽 看 来 根本 是 无 关 或 无 意义 的 审 . 

这 个 概念 立即 可 以 用 到 区 疗 佑 计 的 问题 上 来 . 便 如 , 设想 9 
为 一 个 一 维 实 参 数 ,在 得 到 祥 本 ”时 ， 如 要 给 8 ( 指 = 所 求 自 的 那 
个 总 体 的 具体 的 参数 值 6 它 的 值 按 4 (6) 的 方式 出 现在 大 量 类 
似 的 总 体 中 一 一 参看 $2.8( 一 ) 中 提 到 的 那个 产品 验收 的 合子 ) 定 
出 一 全 可 能 的 下 界 , 可 选取 一 个 2， 致 


| dH lw) 1—o. 
[| 


这 祥 的 可 称 为 (在 先 验 分 布 五 之 下 ) 8 的 水 平 1 一 a 的 Bayes 时 
信 下 界 ， 这 在 形式 上 虽然 和 Neyman 的 置信 下 界 相 似 ， 但 水 平 
1 一 “的 意义 则 有 些 不 同 ， 在 Neyman 意义 下 水 平 1- a 的 解释 已 
于 前 述 . 在 Bayes 意义 下 则 是 这 样 的 ， 假 定 我 们 大 量 次 数 地 使 用 
这 个 估计 ， 第 ww 次 使 用 时 9 之 值 为 0, 而 样本 为 5, % 一 1，2,…， 
我 们 注意 到 此 处 {gw} 为 自分 布 4 五 (9) 中 取出 的 iid. 祥 本 , 而 非 一 
堆 毫 无 规律 可 言 的 未 知 数 ( 如 在 Neyman 理论 中 那样 )， 从 这 个 序 
列 { zn， gu)，m= 二 2，…} 中 排 量 那些 zs 一 的 足 标 %， 设 为 由 ， 
mz,，…， 则 在 于 序列 fp $ 一 1,，2,…} 中 , 硅 少 有 100(1L -oy% 的 
部 分 落 在 多 (w)}， co) 内 . 另 一 种 可 能 的 频率 解释 如 下 . 把 
{(%, D :Ao) <0} -A 


= B95 » 


nie db a mm 


作为 凶 x 回 的 一 个 子 集 ， 它 在 祁 率 测度 6 一 Q (的 Gote) 之 下 
有 一 定 的 概率 P(4), 因为 由 ts) 的 定义 有 
P(A| 及 -2)>1—a, 
对 任何 z 毛 舍 , 故 
PAY= BE{P(AI ZI}P1—a. 
这 样 ， 既 然 Cow bg ,mn 一 1，2,… 是 分 布 卫 的 这 , 样本 , 在 一 序列 
不 等 式 
gern) EB nl1, 9, 
中 , 至 少 有 100 (1 一 @) % 的 部 分 此 正确 的 , 这 个 解释 与 在 Neyman 
意义 下 的 解释 相似, 但 其 基础 则 店 有 不 同 ， 在 国定 6 时 , Neyman 
青 论 存 朋 确 解释， 但 在 此 处 即使 在 条 件 概率 的 意义 下 也 不 行 . 因 
为 由 王 (d 关 1 一 4 并 不 能 推出 对 一 切 80E 台 有 了 (A|8 一 8B0) 守 1 一 
a， 对 某 些 外， 了 (4 人 =b) 可 以 远 低 于 工 一 < 因此 ， 如 在 序列 
{en po，% 一 工 2 …} 中 挑 出 那些 ,一 名 的 足 标 % 而 得 子 列 %。， 
sro …; 则 在 一 序列 不 等 式 
{rs) SO, $=1, 2, ，.. 

中 ， 正 确 的 部 分 可 能 远 低 于 100(1 一 叫 锣 。 以 上 的 仔细 讨论 应 当 
使 读者 对 Neyman 尝 信 水 平和 Bayes 置信 水 平 的 差别 有 清楚 的 印 
象 . 

Bayes 置信 上 界 及 其 Bayes 置信 水 平移 定 义 与 下 界 完全 类 似 ， 
至 于 Bayes 置信 区 亲 , 其 含义 也 不 难 了 解 : 如 果 对 任何 有 
| a 1—o, 


| BE 
则 称 [8， 杯 为 的 一 个 Bayos 管 信 水 平 为 1~« 的 Bayes 置信 区 
间 . 所 有 前 甸 对 下 界 所 述 的 一 切 , 对 区 间 的 情况 当然 完全 适用 ， 
当然, 也 利 其 它 判决 问题 一 样 , 即使 在 能 合理 地 假定 先 验 分 布 
存在 的 场合 , 也 有 一 个 怎么 规定 这 个 分 布 的 问题 , 有 的 作者 企 赂 类 
出 一 些 一 般 的 原则 , 像 * 同 等 无 知 "的 原则 , 当 6>0 时 以 4 作 先 
验 分 布 的 原则 之 美 ， 以 本 书 作者 的 意见 看 , 虽然 为 了 在 理论 上 处 
更 问题 ， 往 往 选 取 一 种 与 该 分 布 族 的 数学 形式 相 适 应 的 分 布 作 先 


[4 和 


验 分 布 有 其 方便 外 , 从 实用 的 角度 看 , 企图 定 出 任何 一 般 的 规定 上 先 
验 分 布 的 法 由, 都 是 无 补 于 事 的 . 
例 4.3.1. 变量 互 服从 二 项 分 布 世 wm, PD)、 取 2 的 先 验 分 布 
为 Bta, )， 即 有 密度 
Lf, BD), ODEl, 


帮办 -| ny 

此 处 了,(u,B) 的 定义 见 (4.1.29) 下 面 的 式 子 . - 

根据 例 2.3.2, 得 到 样本 = 后 ，2 前 后 验 分 布 为 Be 二 mw 9 二 
5 一 各. 因此 在 先 验 分 布 (4.2. 耻 之 下 , PP 的 置信 系数 1 一 «的 Bayes 
置信 上 下界 分 别 由 方程 

Itt, 十 下 一 他 =1—a 

和 “Tolat ow, 下 十 再 一 区 一 多 
所 决定 , 至 于 2 的 置信 系数 1 一 0 的 Bayes 置信 区 间 , 可取 为 任何 
满足 

Tlgt+%, nid—m) 一 了 人 十 入 n+b—s) 一 荆 一 外 (4.2 .2 
的 多 ， 允 ， 如 要 寻找 最 得 的 区 同 , 则 规 要 在 条 件 

知 十 单一 卫 QQ 站 可 十 帮 一 光一 工 一 各 re [Ei _. 2) 得 十 由 一 要 一 于 

之 下 ,使 由 .3. 纹 满足 当 一 8=1 时 , (4,2. 弯 为 均匀 分 布 ,好 在 
“局 每 无 知 ” 的 假定 下 的 先 验 分 布 , 这 就 是 所 谓 “ 迹 概率 问题”, 这 个 
情况 下 本 例 提 供 的 区 间 悄 计 是 历史 上 最 嘻 提 出 的 区 间 居 计 之 一 . 

例 4.2.2. 设 中;，…， 亚 。 为 取 自 站 避 地 的 iia. 样本 , 取 昌 
的 先 验 分 布 沟 入 (0, 如 )。 在 鲍 3.3.8 中 已 求 得 的 后 验 分 布 为 
《站 以 记号 “8| 互 " 记 8 的 后 验 分 布 ) 


mk? 本 
9 了 往 | lnk?? 1-+ng? ) 


{4.9.1) 


考 虚 以 下 几 个 问题 ; 
1”9 的 Bayes 置信 上 ,证 界 与 里 入 区 间 , 分 别 为 
nn 十 ks nk yy 
1+nb ViTn™ Tone Virnei 
、 nk 天 ne E 
以 及 Ee VITAE Ttnb Vira Lb 


-BOT 


当 双 co 时 ， 它 们 分 别 趋 向 于 水 平 1-a 的 UMA 上 、 下界 及 
UMAUD 区 间 . 
2 固定 长 度 4 的 Bayes 区 间 估 计 ， 显然 ， 最 优 的 取 法 是 到 


二 用 ， 汉 给 定时 ,此 区 间 ( 在 一 切 长 为 4 的 区 间 中 ) 包 人 


1+nk? 
的 条 件 概 率 最 大 , 也 可 以 采取 另 一 种 看 法 .引进 损失 函数 
0， 当 es 闪 De 二 世 
i 其 它 ， 
则 上 述 区 闻 为 所 给 先 验 分 布 之 下 的 Bayes 解 . 

3° 也 可 以 把 置信 系数 和 区 间 长 度 结 合 在 一 起 来 考 典 ,这 可 以 
膛 过 引进 损失 函数 

Lg, [Ls, 51) = 过 一 二 + ml v0) (4.2.3) 

米 实现 ， 这 里 只 >0 为 常数 ，T ar 人 (的 的 意义 与 通常 一 样 ， 即 当 
6<g<sb 时 为 0, 其 它 情况 为 1. 

不 难 验 证 , 这 问题 的 Bayes 解 仍 有 


L(G, [a, es 十 大) -{ 


的 形状 , 得 8 由 
atm[1-s (St)] -it {m [~-s (让 
(4.2.4) 
来 沁 定 ， 


《二 ) 区间 估计 的 判决 画 数 至 论 


判决 函数 理论 之 用 于 区 间 和 估计， 我 们 前 在 定理 4.1.2 中 已 兄 
一 例 , 这 里 再 对 这 个 问题 稍 多 说 几 名 话 . 
$4.I 的 置信 区 间 估 计 理 论 ， 在 一 个 方面 与 假设 检验 理论 相 
似 , 即 荐 把 问题 中 的 两 个 主要 方面 分 开 处 理 ; 在 假设 检验 中 是 两 种 
错误 , 在 区 间 估 证 中 是 可 蔡 度 和 精确 度 , 这 种 作法 , 一 方面 辐 然 有 
其 历史 上 的 原因 一 一 因为 置信 区 疗 理论 的 创始 者 Neyman， 也 是 
398 。 


傻 设 检验 理论 欧美 基 者 之 一 , 而 他 在 发 展 其 署 信 区 间 理 论 时 ,广泛 
地 使 用 了 其 与 假设 检验 的 联系 ， 从 实用 的 观点 看 这 种 处 理 也 是 恰 
当 的 ,因为 由 “不 可 甘 ”" 和 “不 精确 ” 带 来 的 后 果 . 在 实际 问题 中 可 能 
不 宜 在 同一 基础 上 去 计算 . 

判决 函数 理论 中 之 概念 用 于 区 间 估 计 ， 使 问题 的 提 法 和 内 容 
都 变 得 更 广 , 即使 维持 原来 把 两 个 方面 分 开 处 理 的 作法 , 但 由 “不 
可 靠 ” 和 “不 精确 ”而 带 来 的 损失 如 何 稀 量 , 仍 有 颇 大 的 灵活 性 , 换 
名 话说 , 我 们 可 引进 种 种 损失 函数 来 刻 划 它 们 , 我 们 也 可 以 把 这 二 
者 统一 在 一 个 损失 尔 数 内 ,如 在 例 4.2.2 中 ，(4.2.3) 就 是 一 个 这 
样 的 损失 函数 ， 其 中 的 两 项 分 别 反映 由 于 不 精确 和 不 可 草 而 带 来 
的 损失 , 下 面 欧 函数 

LC, Le, B) =|a-0|+|6—0i 
也 可 以 考虑 作为 这 问题 的 损失 函数 ， 我 们 也 可 以 将 序 贯 估计 引进 
来 , 把 试验 费用 作为 一 个 因素 加 入 到 损失 函数 之 内 - 

判决 函数 理论 的 一 个 特点 就 是 把 一 个 统计 问题 转化 为 一 个 最 
优 性 的 问题 , 这 些 准则 , 像 Bayes，Minimax, 不 变性 之 类 , 都 可 有 十 
于 区 闻 估 计 ( 如 果 作 为 一 种 最 优 性 准则 和 解决 问题 的 手段 来 看 ， 
Bayes 方法 就 可 以 内 看 作 是 一 种 数学 上 的 东亚 ， 而 不 必 涉 及 有 关 
先 验 分 布 存 在 的 假定 是 否 合理 等 哲学 问题 ), 而 这 就 丰富 了 区 间 信 
计 理 沦 的 内 容 ， 

循 着 这 个 线索 ， 我 们 可 以 把 第 二 章 中 就 点 估计 问题 较 仔 细 地 
讨论 过 的 一 些 判 次 函数 内 容 移植 到 本 章 的 区 间 估 计 间 题 上 来 ， 由 
于 没有 多 少 原则 性 的 新 东西 ,这 里 不 重复 有 关 的 细节 了 , 我 们 只 就 
一 个 简单 的 具体 例子 来 说 明 一 下 ， 

比方 说 , 我们 要 用 Minimaz 的 原则 来 讨论 例 4.2.2 中 9 的 区 
间 居 计 向 题 ， 车 以 8 一 a 和 mTie,aye《@) 分 别 作为 “估计 不 精 ” 和 “ 信 
计 不 可 车 ”而 带 来 的 损失 ， 则 根据 Minimax 原则 我 们 可 以 提出 下 
面 三 个 问题 ， 

1° 要求 [2, 下 的 置信 水 平 为 1 一 we。 在 这 个 要 求 下 使 “sap 
也 [ 放 ( 王 ) 一 (下 站 达到 最 小 ， 


OO 加 


2° 要 求 qz， 轧 祝 ( 工 ) -2(Y)]<<c, 在 这 个 要 求 下 使 f, 四 


的 置信 系数 最 大 . 
3* 要 求 [外 本 ,使 
ao {ml1— -PCD <0 TI + BoB) -ECD]) 


达到 最 小 . 

我 们 现在 证 明 : 和 前 UMAU 置信 区 向 于 土 是 所 有 这 三 个 间 
题 的 解 . 

为 此 , 我 们 考虑 问题 3， 在 4 的 先 验 分 布 玉 (0, 4 之 下 ,我 
们 已 求 出 Bayea 解 有 社 土 4 的 形式 , 其 中 2 满足 (4.2. 沪 , 以 下 我 
们 记 这 个 8 为 出 ， 显 热 ，(4.2. 尖 右边 之 量 ( 记 为 rw)， 即 为 Bayeg 

解 王 土 态 的 Bayes 风险 . 

现在 定义 bm， 致 
datm[l—B CV nd)] 一 if (tml sD), 他. .的 


我 们 来 证 明 下 面 的 引 理 ， 
引 理 和 .2.1。 当 宫 由 YY 到 上 升 到 oo 时 , 满足 (4.2.) 的 加 
唯一 , 且 由 0 单调 连续 地 增加 到 co 
证 ， 丽 数 g 国 一 盾 人 m 夺 一 否 (w wz] 的 导数 为 
5 
当 w 一 YY/ 于 时 ，g(0) 0， 而 9 的 > 0， 当 4>0， 如 果品 > 
23， 则 存在 和 >0, 使 FGn) ~0，g 的 <0， 当 0<i<is， 而 
g 0 之 0, 当 #4> 霹 , 由 此 知 员 = 记 , 而 显然 如 随 m 从 V 于 增加 到 


co 时 , 单调 连续 地 由 0 上 升 到 se。 引 理 证 毕 ， 
根据 这 个 引 理 , 可 选择 n>>0, 使 的 区 间 估 计 [并 一 三 十 
dm] 有 置信 系数 工 一 a. 闫 定 这 个 加 且 记 dw~d. 在 损失 再 数 (4.3. 引 
(其 中 % 已 按 上 述 方式 选 定 ) 之 下 , 这 区 闻 估 计 的 风险 为 常数 
ERE=dtm— 人 Sy nD] 


+ De 


tm 如 上 选 定 , 2 二 dm)， 

前 面 我 们 已 求 得 ， 在 6 的 先 验 和 分布 为 克 人 0 后 时 ， 在 损失 函 
数 (4.2.3) 之 下 ，Bayes 解 为 时 土 ，Bayes 风险 为 mm， 大 为 使 
{4.2 .当成 立 的 号 而 因为 性 .2. 久 右边 的 量 , 现在 令 >>, 我 们 
证 明 ; 

lim sup re RR. {4.2.0) 

根据 定理 2.3.6, 这 将 证 明 革 土 d 为 损失 函数 考 .2. 人 之 下 的 
Minimax 解 . 

在 {dw 中 取 一 个 子 序列 {dx = 1, 2, …}, 致 

| lim dr.—do<o0 
车 吕 =oo, 则 显 有 lim dh, ™ ©%, 故 设 加 二 so， 这 时 
limrs, ~lim [ds,+ m (1 & (~ tn ))| 


=dom[1 一 《YW do)] 之 R,( 依 卫 的 定义 ) 
于 是 (4.2.6) 得 证 . . 

现在 考虑 问题 1。 我 们 证 明 , [下 一 -cn 三 + cn] 
是 问题 1° 的 解 (注意 这 区 间 之 长 为 常数 2zo/s/ wm ) . 

根据 前 面 的 讨论 , 存在 m>>0, 使 当 损失 函数 为 (4.2.3) 时 , 上 
述 区 间 估 计 为 其 Minimazx 解 ， 现 在 假定 [@& 如 为 任 一 置信 水 平 为 
1 一 & 的 区 癌 佑 计 ,， 则 有 

sup {mPs(OE LOE), D(H) + EBCE) QF)]} 


2 mat 区 pg 
因而 emp mP, (OE [OCF), OCX)])+ sup BolBD(F) 


—8()] >mat Fe ta/ 


再 由 [中 , 办 有 置信 水 平 1 一 a, 知 
| _amp iok2E 芭 ( 芝 )， FE) Ema, 


sl 


于 是 得 到 sap Dot8(F) 一 8CD)]> < er 


从 而 证 明了 下 士 < 广 - ea 为 问题 1° 的 角 

为 了 得 到 问题 2 的 解 , 须 先 定 出 m>0, 至 和 应 的 bn (意义 网 
前 ) 等 于 o/2. 对 这 个 wm | 至- 号， 室 十 -| 为 在 损失 函数 (4.2.8) 
之 下 的 Minimax 解 ， 以 下 的 讨论 与 刚才 对 问题 1* 所 作 的 完全 相 
似 ， 至 于 问题 8°, 对 n> /之 ,我 们 已 在 上 而 证 明了 其 Minimax 
解 有 [下 一 dr, 时 -dn] 的 形式 , 当 0<m<4/ 5 时 ， 从 前 面 的 论证 


十 0] 的 形式 . 
如 果 设 每 次 抽样 的 费用 为 常数 e>0 而 考 嘎 尹 的 Minimarx 区 
间 佑 计 , 则 易 见 其 退化 为 一 固定 样本 区 间 居 计 , 样本 大 小 mn 应 选择 
之 ,使 
on 二 in { 十 各 [一 画 (V nm 分]) 


一 inf [e 克 十 ini 人 十 凤 虹 一 画 (w 克 及 ] 让 ， 
人 (4.9.7) 
我 们 把 导致 这 个 结果 的 简单 论证 作为 习题 留 给 谈 者 . 
让 书 作者 考虑 了 方差 末 知 时 正太 分 布 均值 的 区 间 慎 计 和 问题 . 
在 损失 函数 (m oo 为 正 态 总 栖 的 均值 和 方差 ) 


Lo, 0 Ee, 中 ) = de 


之 下 ， 得 出 与 前 面 ol 时 相应 的 三 个 问题 的 解 就 是 通常 的 一 样 
本 太 区 闻 信 守 ( 见 4 科学 通报 +*, 17 者 , Pp. 的 一 100)， 扬 用 的 方法 与 
此 处 所 用 的 类 似 , 但 论证 更 为 复杂 ?. 

也 在 所 引 本 书 作者 的 工作 中 , 只 明确 地 处 允 了 比 处 的 问题 1”， 但 对 疝 题 2* 论证 
是 一 样 的 (问题 3" 已 二 括 在 解 居 1* 的 过 程 中 )。 又 成 平 同志 向 作者 指出 , 者 采用 正太 


分 布 伐 畸 作 者 所 用 的 均匀 分 布 放 为 均值 的 先 验 分 布 ， 则 论证 可 以 简化 ， 这 个 意见 是 正 
确 的 。 


+ mI.ar Cm) 


与 上 述 相 出 远 为 容易 的 论证 证 明 : 在 平移 变换 群 下 {对 前 面 现 
定 的 损失 函数 而 言 ), 所 得 出 的 区 间 信 计 是 一 致 最 优 的 不 变 区 间 情 
计 . 


《三 ) 信 全 推断 法 


这 是 BR. A. Fisher 在 三 十 年 代 提 屿 的 一 种 方法 ， 不 涉及 这 方 
法 的 创始 者 的 原始 思想 (应当 说 ， 这 在 Fisher 的 单 期 工作 中 并 未 
十 分 明确 地 表达 出 来 ), 我 们 可 以 说 , 这 方法 的 要 区 在 于 , 在 不 涉及 
参数 的 先 验 分 布 的 情况 下 , 根据 观察 样本 定 出 参数 的 一 个 分 布 . 
这 个 分 布 在 数学 上 说 有 概率 分 布 的 性 质 , 但 不 容许 任何 频率 解 检 ， 
这 个 分 布 并 非 由 于 参数 具有 随机 变量 的 特征 而 带 来 的 ， 而 只 是 中 
达 了 : 出 于 所 得 样本 的 信息 ,参数 落 在 种 种 范围 内 的 “可 信 程 度 ”， 
因而 被 称 为 "信人 昼 分 布 “FEidneial distribution). 

举 一 个 简单 例 于 . 设 裤 tb … 蕊 。 为 取 自 入 (@, 的 i 设 样 
本 . 由 于 为 充分 统计 量 ， 我 们 可 以 基于 这 的 分 布 来 考 感 问题 ， 
这 时 Mn (二 一 分 一下 人 0 力 , 有 


PlVana (FE- < -BN, (4.2.8) 
此 式 可 改写 为 
P(e> 了 天)-500， (4.2.9) 


从 传统 概率 论 观 点 着 ，(4.3. 的 和 (人 (4.3. 纹 不 过 是 同一 件 事情 的 不 
同 表述 方法 ， 但 “信仰 推断 论 者 "对 (4.2.9) 赋予 一 种 全 新 的 解释 ， 
邯 把 裤 看 成 固定 的 , 而 (4.2. 纺 规定 了 6 的 分 布 .这 个 分 布 具 有 通 
常 变 率 分 布 的 一 切 性 质 , 他 们 把 这 称 为 2 的 信仰 分 布 , 由 这 个 分 布 
出 发 可 作出 8 的 区 闻 居 计 , 例如 , 由 分 布 他 -3. 的 可 得 


Pp (¥ 一 zip<g< 了 +- 产 - ga ) -1 一 a 


因而 可 取 二 -sn 为 的 “信仰 系数 "1 一 a 的 区 间 估 计 ， 这 
时 结果 与 Neyman 理论 得 出 的 一 致 , 但 在 解释 上 则 根本 不 同 . 


中 三 中卫 m 


rn -ae 一 ma 
aa 


有 一 个 时 期 , 人们 认为 Weyman 理论 和 Fisher 理论 在 很 大 程 
度 上 不 过 是 同一 忻 事情 的 两 种 不 同 的 说 法 而 已 , 然而 , 往 后 的 发 展 
使 人 清楚 地 需 到 , 这 二 者 是 根本 不 同 的 东西 -一 -不仅 在 解释 上 , 而 
且 在 具 惧 结果 上 . 

现在 设 不 1，…， 斑 。 为 取 自 正 态 总 体 友人 a 的 ii9， 样本 ， 


则 ( 们 ,5) 为 充分 统计 量 ， 此 处 8 一 内 (一 如 :由 


全 导 一 全 ~ 可 以 导出 5 的 信介 分 布 ， 在 这 里 ， 论 据 衣 不 


像 前 例 那 么 简单 明了 ， 因 为 不 是 显然 一 下 子 就 能 决定 ， 是 否 能 从 
(到 ,六 出 发 规定 的 另 一 个 信仰 分 布 . 

Fisber 的 思想 在 统计 学 界 引 起 了 相当 的 兴趣 和 人 争论， 争论 的 
焦点 , 主要 在 于 一 方面 拟 谓 “ 信 伸 分布" 究竟 是 什么 , 一 方面 是 能 否 
为 之 建立 一 个 严格 而 有 用 的 理论 ， 对 这 个 理论 ， 第 一 步 的 要 求 就 
是 ,在 相当 广泛 的 条 件 下 指明 一 个 确切 的 方法 , 使 之 能 出 样本 定 出 
信 信 分布， 半 明 在 这 样 的 定义 下 ， 信仰 分 布 所 遵守 的 一 些 基 本 法 
则 , 等 等 . 月 前 有 些 作者 已 在 这 方面 作 过 一 些 尝试 ， 但 从 所 得 千 果 
看 还 是 很 有 限 的 . 另 一 些 工作 则 揭示 了 Fisher 理论 中 的 一 些 内 
在 困难 . 

如 果 分 布 族 {TPe( 风 ,89E 全 有 一 个 一 维 的 充分 统计 量 卫 ( 卫 )， 
考 由 了 (到 ) 的 分 布 函 数 到 G, 有 的， 如果 存在 已 知 的 分 布 通 数 也 
及 站 和 240<2 一 的 已 知 函 数 &(8 他 ， 致 

PAT (A) E40, PD}—p, 0<p<l, 
而 集合 { 霹 四 :1s (6, 苏 } 开 转化 为 《全 四 :0&bG, 信 或 { 企 
站 :90tt 四 ), 则 可 得 到 8 的 信 虱 分布 

PEs, pm) SOEDE, po) = pm 
《类似 地 对 第 二 种 情况 )， 前 面 所 举 的 不 (, 1) 中 iid. 样本 的 例子 
就 属于 这 种 情况 、 再 举 一 个 例子 . 

例 4.2.3. 设 变量 互 的 分 布 为 GPe( 人 = 了 (cz 们 dz 这 里 
fw, 由 一 0 当 z<0， 而 当 w>D 时 ， 

了 (ee 0) = [OT (Cp)] m1lese, 


ad， 


这 里 9>0 为 未 知 参 数 ,而 p>0 为 已 知 数 . 
证 巧 :，…, 站。 为 互 的 训 . 样本 ， 则 i 一定 为 9 的 充分 统计 
量 , # 的 分 布 为 9 全 办 避 ， 而 


0 <0， 
gC, Wael{ ， ~ 


4.2.10 
[nb -nnn 10a T (np) J dt, > (4.2.10) 


由 此 可 知 Po ~ TED frr e-ndy, 
若 以 GOW 证 昌 和 出 由 上 式 得 
1 一 安 作 /为 一 7 py zh rgy mp 一 1 e dy. 
因此 , 著 以 YN ==G"( 罗 记 8 的 "信和 佩 密 嵌 则 Jy) =0, 当 X<o, 而 
gt -了 ( 半 )”*"“ 访 当 和 cr0， (4.2.1D) 
比较 (4.2.10) 和 (4.2.1D 知 ，g(9)a8 由 在 (4.2.10) 中 疏 性/t 为 
96070 而 得. 
读者 一 定 会 注意 到 : 这 种 条 件 下 得 出 的 9 的 信仰 分 布 , 基本 上 
不 过 是 统计 量 上 的 务 布 的 另 一 种 写法 (当然 其 解释 根本 不 同 )， 然 
而 , 信仰 推 断 论 者 从 这 些 较 简单 的 情况 出 发 , 导出 较 复 杂 的 信仰 分 
布 。 | 
们 和 .3.4. 设 节 1，，…:， 防 ,为 取 自 入 (4, 9 中 的 iia, 样本 ， 
记 了 一 于 ,8 一 襄 (了 , 一 卫 )”， 则 (Y， 有 为 此 正 态 分 布 族 的 充分 统 
计量 , (Y, 名) 的 联合 密度 为 
a0 dae Ey 


W131 
ae 12m -HT (全 a 
00 时 于 为 六 . 
当 立 已 知 时 , & 的 信介 密度 可 在 上 上 式 第 一 因子 中 换 i 为 既得 
到 ， 又 根据 例 4.2.3, o? 的 信仰 密度 可 由 上 式 第 二 因子 把 ez 换 
成 dato 站/g 而 得 . 这 样 ， 如 果 以 94de Yo? 代 寺 上 式 中 的 dydz/s, 


二 。 


可 erp (一 -27) ds, 2>0, 


邑 得 (4, o 中 的“ 联合 信件 密度 ”六 


ga, a ly, DW =— 3 erp[ — 2 Jao 
Zi/2 Er a 


Qo sa (23-) ° 
对 从 0 到 co 积分 ,得 出 a 的 “边缘 俯 杭 密 峻 ” 汶 


holy, 2 -ae 二 8 (次 生 - 肪 PD 一 中 [1»—1) 


(此 处 s(t: 19- 了 D 是 如 -1 的 窗 度 函数 ， 由 此 得 出 以 前 指出 的 结果 ， 


CC- 四 的 信仰 分 布 为 如- 
nl > 
从 表面 上 看 ,这 个 推导 比 前 面 直接 由 上 分布 出 发 显得 自然 此 
但 里 面 也 隐 含 了 一 些 新 的 假定 , 例如 用 dadozlas 代 gdzfe 是 否 合 
理 , 出 于 信人 分 布 的 计算 并 未 建立 明确 无 误 的 规则 , 这 类 假定 是 否 
合适 是 很 可 以 讨论 的 、 
我 们 关于 信 爷 推断 法 就 限于 以 上 的 很 初步 的 介绍 ， 我 们 不 希 
望 读者 从 中 得 出 结论， 即 本 书 作者 对 这 个 方法 的 态度 是 完全 否定 
的 , 然而 , 丽 怕 多 数 人 都 能 同 ,党 的 一 个 意见 是 ; 这 个 理论 要 发 展 成 
为 一 个 普遍 而 有 效 的 理论 , 需要 做 的 工作 还 很 多 ， 


(四 ) 慷 仰 推断 法 用 于 Behrens-Fisher 问题 


Fisher 基于 其 信仰 推断 法 对 正 态 分 布 方差 不 等 时 均值 益 的 区 
闸 佑 计 问 题 提出 了 一 个 解法 , 这 个 解法 之 所 以 有 趣 , 在 于 它 使 人 科 
于 到 , 就 是 在 这 各 一 个 比较 简单 的 问题 中 , 也 显示 出 Neyman 的 方 
法 与 Fisher 的 方法 确 是 不 同 的 东西 。 

设 下 …， 呈 w 和 了 …， 了 ww 是 分 别 取 自 站 (eco 人 和 下 (人 ， 


”只 的 iid. 样本 , 我 们 已 知 , (于 ,了 ,5% 3) 是 全 体 参 数 的 充分 统 


计 芋 ,此 处 


+ 


I 时 3 
和 


按照 例 4.2.4 的 方式 ,可 以 导出 人， 有 co 包 的 联合 信仰 分 布 , 由 
之 出 发 可 导出 mw 一 qz 的 信 仲 分 布 。 现 在 我 们 不 这 么 作 ,， 而 采用 下 
述 比较 简单 的 推理 , 我 们 有 

Em, FF—a= Bd. (4.2.12) 


此 处 8 一 Sm So 而 刀 为 为 独立 的 中 心 本 变量 ， 


自由 度 分 别 为 各 一 1 和 mz 一 1 记 

d=YF— TE, $$—qs— a 
则 由 地,3.19) 知 ， 

dG—$= Hts— Sb, (4.2.13) 
直到 现在 为 止 一 切 推 理 都 是 在 通常 概率 论 的 原则 下 进行 的 ， 根 据 
这 个 , 夺 和 要 除了 作为 由 关系 式 (4.2.12) 定 出 的 量 外 ， 并 未 赋 
予 任何 独立 起 作用 的 意义 ， 然 而， 从 形式 上 看 ， 当 样本 已 定时 ， 
(4.2.1 吕 给 出 一 个 机 会 把 当 作 随机 变量 看 的 5 的 分 布 比 附 于 两 个 
独立 中 心 扩 -变量 二 加 的 线性 组 会 (其 系数 Sa，8o 已 知 ) 的 分 布 ， 
Fisher 根据 这 一 点 断言 (更 正确 地 说 是 定义 ) 
GS- 人 的 (信仰 ) 分 布 一 Bt 一 侣 二 的 通常 概率 分 布 ， 
其 中 8，8s 已 知 厕所 加 为 独立 的 .自由 度 分 别 为 
一 1 和 no 一 1 的 中 心太 变量 . 
考虑 变量 W= (oni — (ain OE, 
其 (通常 的 ) 将 率 分 布 显然 只 与 及 ny, ns 有 关 . 设 已 求 出 了 瑟 的 分 
布 函数 了 (wy 09, ra， rm， 决 定 wo， Ww ms 致 
EF (Ws, wm mi OD tr, Ha) — PO— Wa, 人员 $9) 一 工 一 好 

于 是 得 到 5=as 一 at 的 信仰 系数 为 1 一 “的 信 仲 区 间 到 一 总 ) 土 
AS 十 人 Wa, so 这 里 已 贞 


六 一 oai[S VS + SY 
决定 ,在 Fisher 和 Yates 编 的 统计 中 , 载 有 为 使 用 这 方法 所 必须 
的 家。 


“7 


一 
Te 


关于 这 个 解法 ， 置 信 区 如 理论 的 创立 者 Neyman 在 一 项 工作 
中 进行 了 批评 ，Neyman 主要 提 到 两 点 ; 一 是 由 全 .2.13) 出 发 导出 
5 的 “信人 刷 ” 分 布 这 一 作法 是 含糊 不 清和 的 ， 饼 乏 根 据 和 的 ， 既 然 未 对 
“ 信 休 分 布 " 作 出 完全 明确 的 定义 而 又 借用 通常 概率 论 中 的 结果 ， 
提出 这 种 批评 是 自然 的 , 另 一 点 是 Neyman 通过 计算 证 明 : 这 样 定 
出 的 区 间 估 计 并 不 具备 在 他 船 意 义 下 的 置信 系 获 工 一 wx, 乙 就 m1 一 
12, no 一 6 和 9 一 0.05 的 情 帝 作 了 计算 , 说 明 由 Fisher 方法 作出 的 
信仰 区 间 包 会 被 估计 的 sa 一 号 的 概率 , 依赖 于 比值 p=eayca。 当 
?二 00.1, 1.0 和 和 10 时 , 这 概率 分 别 汉 0.866, 0.960 和 0.934， 对 
后 面 这 个 批评 ， 信 刷 推 断 论 者 并 不 在 意 ， 因 为 他 们 并 不 认为 ， 维 
区 和 间 估 计 以 Neyman 那 种 频率 解释 是 不 可 或 缺 的 ， 在 他 们 淆 来 ， 
Neyman 和 的 计算 结果 的 意义 只 在 于 证 实 了 “信仰 系数 ”与 “置信 系 
数 ” 确 非 一 样 的 东西 .事实 上 , 更 使 人 感 兴趣 的 是 : 即使 在 本 例 这 样 
较为 复杂 的 场合 , 基于 根本 不 同 的 出 发 点 所 建立 的 区 间 悄 计 的 “可 
这 度 ” 有 着 很 接近 的 值 . 


§$4.3. 序 贯 区 疗 估计 


{一 ) Dantzig 的 定理 


在 点 合计 和 假设 检验 中 我 们 都 指出 过 ， 使 用 序 贯 方法 的 目的 
不 外 平 两 条 ， 一 是 为 了 达到 指定 的 精度 ， 有 时 非 使 用 序 贯 方法 不 
可 , 一 是 在 同样 的 精度 下 , 使 用 序 贯 抽样 有 可 能 节省 拙 祥 次 数 , 在 
区 间 估 计 中 使 用 序 贯 方法 , 也 不 外 乎 追求 这 些 目标 . 

关于 这 个 问题 ， 以 往 我 们 曾 以 正 坊 总 体 为 例 说 明 过 ， 设 斑 。， 
…， 也, 为 取 自 正 态 总 体 亨 (a, 0) 的 记 . 样本 ,我们 知道 ,对 a 的 
任何 无 偏 估 计 扩 都 有 


Varg,e (&) > 


如 果 想 要 作出 as 的 一 个 无 篇 佑 计 , 使 其 方差 对 一 切 参 数值 (co 
总 不 超过 一 个 指定 的 二 < ce, 则 无 论 取 多 大 也 不 行 , 这 意味 着 在 
+ 要 DR 


赔 定 样本 范围 内 我 们 无 法 使 a 的 估计 在 任何 情 祝 ( 妈 对 参数 4, oa 
的 任何 值 ; 下 都 达到 指定 药 精 度 ， 在 假设 检验 中 我 们 证 明了 ; 若 要 
检验 < 一 0 而 希望 当 |ea| 超 过 某 个 指定 的 83>0 时 , 功效 值 达 到 指定 
的 8>a (a 为 检验 的 水 平 )， 刚 在 固定 样本 下 也 无 法 达到 ,现在 我 
们 证 明 : 相应 的 区 高 佑 计 问 题 在 国定 样本 下 也 无 法 解决 ， 这 个 问 
题 是 ; 给 定 w 0<a<1 以 及 了 上 >0, 要 找到 一 个 4 的 区 间 估 计 , 使 
其 置信 水 平 为 1 一 a 而 长 不 超过 工 . 

定理 &.3.1CDantzig, 1940). 设 三 ， 部。 为 取 髓 下 (aa 
的 iid. 样本 , 及 一 (Zs …， Zw)，[ mC) 一 了 人 2 m (X) + 


必 生 | 为 4 的 一 个 区 间 估计 , 其 置信 水 平 y>>0, 则 


中 了 人) 一 co. (4.3.1) 

证 . 在 §4.2 (二 ) 中 我 们 证 明了 这 样 一 个 结果 1? 设 五 1,，…， 

芯 , 为 取 自 直人 o”) 中 前 iid. 样本 , o? 已 知 ' 则 在 的 一 切 恒 入 
系数 为 y 的 区 间 咎 计 中 ,平均 长 度 的 最 大 值 当 区 间 估 计 为 


oT 


[ 王 一 <- sa-rya 至 十 < su_oma] 
时 达到 最 小 . . 
现在 设 (4.3.D) 不 成 立 , 则 sap 工 (2) 一 工 <oo， 取 oo 充分 大 
致 20osa-nvs/ 有 > 大 这 时 ,区 闻 佑 计 mw) 士 了 (co)73 一 方面 有 
置信 水 平 9 另 一 方面 ， 其 平均 长 讼 不 超过 也， 而 Lao ra/ 
wa， 但 另 一 方面 , 当 e 一 co 已 知 时， 区 闻 估 计 豆 士 on 


在 一 切 秆 信 水 平 为 7 的 区 间 全 计 中 ,平均 长 度 最 天 值 达到 最 小 , 故 
应 有 


L329g080_ na MV nt, 
这 个 际 盾 证 有 明了 定理 4.3.12?.， 这 个 定理 可 以 推广 成 下 面 的 形式 ， 


D 此 结果 虽 是 对 3 一 1 的 情况 来 证 的 ;但 黑 热 也 适用 于 02>0 已 知 的 情况 。 
双 这 个 证 明 与 Dantsig 原来 的 证 明 不 一 样 。 


De 


设 变量 子 的 密谋 画 数 (对 荆 测 度 ) 为 (全), -ceo<z<co， 这 
里 参数 o>0 及 = 都 未 知 , 而 7(o) 为 (一 cc, eo) 上 的 一 个 概率 密度 
函数 (对 荆 测度 ), 设 X1,，*…, 了 ,为 了 的 i 样本 , 则 定理 4.3.1 
的 结论 仍 成 立 . 


(二 )Stein 的 两 阶段 柏 样 

由 定理 4,3.1 可 知 ， 若 要 得 到 5 的 置信 水 平等 于 指定 的 1 一 a 
(0<a< 直 ,而 区 间 长 度 总 不 超过 指定 的 常数 了 <co， 则 必须 使 用 
序 叶 方法, 在 1946 年 ,Stein 提出 了 这 样 一 个 方法 , 这 方法 的 基本 
思想 已 在 $ 2.7 ，( 一 ) 中 有 所 说 明 ， 

我 们 先 证 明 几 点 预备 事实 . 

引 理 生 .3.1， 设 名 为 一 自然 数 , 0 为 常数 ， 5? 和 了 都 是 随机 
变量 ,23- 一 况 , 而 当 给 定 8=s 时 ,了 的 条 件 分 布 为 万 (0, cx/ 的 ， 
则 Y ~t,. 

证 ， 由 假定 知 了 的 密度 函数 (对 荆 测 度 ) 为 - 


| 8 sy 2(F) sp- (和 
ft 一 oro go ) 一 全 7 J (到 到 exp 入 os, 
名 


直接 算出 这 积分 ,不 难得 出 了 (9) 与 刀 的 密度 西数 完全 一 样 . 
引 理 4.8.2, 设 下 了 至 2 … 相 互 独立 ， ~ NG, o”), d= 
1 2,…。 给 定 自然 数 wo 记 


1 n 9 1 有 — 
于 = 一 六 S 二 I ZX To”, 
又 设 本 (全 二 二 gm (5 (三 8 (5)), omit) (=8)), 
都 是 六 的 已 知 函 数 , n~n(5 也 是 5 的 函数 ,而 
> mH) (Ho 


) 
P= 1 
8/ Sots) 


0 


证 . 有 (wo 一 I) S52~-x2, 1， 而 在 给 定 S=s 时 , 了 分 成 两 部 分 
看 ; 
moby) (Roo +b (0) F (Xa) 

3 moa?(s) + [nls) — rnold Cs) 

由 于 5 与 正 独立 ， 在 给 定 恒 ~s 时 ， 了 i 的 条 件 分 布 为 信 (0， 
Oo (8) /es {no (8) + [nn(8) — no b? (9)} ,至 竹 了 s, 因为 人 只 与 
四，-…， 卫 有关, 故 与 五 nm， … 独 立 , 因而 了 。 的 条 件 分 布 为 

N (0, o (nC) —nm0) B28) /s {no8? 8) + [C8) — no] (3)}), 
而 在 给 定 人 Ss 时 , 了 i 与 了 独立 , 故 得 在 给 定 S=s 时, 了 的 条 件 
分 布 为 态 (0, o/s), 再 根据 引 理 4.3.1 即 得 所 欲 证 的 结果 . 

现在 设 有 正 态 总 体育 (ga, o 中 。， 任 取 定 c>0 及 自然 数 mo、 从 
这 正 态 总 体 中 抽出 iid. 样本 了 1，-…， 廊 。。( 第 一 阶段 抽样 ) 窟 .83 
的 意义 同 前 , 定义 


一 了 2 十 3， 


"=maz{no, [S2/0] +1} 
《四 表 不 超过 w 的 最 大 整数 ), 则 nm 为 8 的 函数 , 取 
a (8) = Gal8) = 工 ， 


则 由 引 和 理 4.8.2 可 知 ， 若 继 续 拍 漠 iid. 样本 rl ry 看 ， {第 二 
阶段 抽样 ) 而 令 


YY To)/S, (~ ix), 
则 有 了 ~ 二,_1， 从 而 得 到 & 的 置信 系数 为 1 一 a 的 相似 置信 区 间 
[ 了 3 (号 )， 了 +- 天 Sims ($)}, (4.8.2) z 
由 的 定义 知 m2>S3/o, 故 这 区 间 之 长 不 超过 
六 Si (GF)E2V oh, ($), 


oI? / EC) 有 (4.3.3) 


则 可 使 其 长 度 总 不 超过 指定 的 工 , 


具 涡 取 


二 全 L1 » 


这 样 ， 为 得 到 正 态 总体 契 (o,，o 人 中 的 均值 的 区 间 估 让， 其 
置信 水 平 为 1 一 xc 而 长 总 不 超过 五 gtein 的 两 阶段 抽样 作法 为 ; 

a， 指定 自然 数 m. 由 但 .3. 纹 决定 二 

b. 抽出 i 记 . 样本 互 g …， 开 sw， 由 之 算出 8， 并 按 n 一 
max{no，[33/0j 十 直 算出 n; 

.车 n=ro 则 抽样 停止 ， 否则 继续 抽出 过 . 样本 下 wsri 
亚信 

ad. 取 (.3. 分 为 上 的 宝 信 区 间 . 

我 们 已 看 到 , 这样 作 出 的 置信 区 间 为 置信 系数 i 一 a 的 相似 置 
信 区 间 ， 但 其 长 志 荆 而 不 必 总 等 于 工 ， 睹 微 修改 上 述 抽样 方案 和 
有 关 统 计量 的 定义 , 可 得 出 置信 系数 1 一 a 而 长 总 等 于 荆 的 相似 置 
信和 区 闻 , 这 一 点 留 着 作为 习题 . 

有 一 些 作者 研究 过 Btein 抽样 方案 中 第 一 阶段 样本 大 小 mw 的 
最 优选 择 间 题 ， 有 人 指出 ，Stein 方法 在 估计 总 体 方差 of 时 未 用 
到 第 二 阶段 的 样本 , 这 可 能 降低 了 它 的 效率 , Stein 的 方法 还 可 以 
用 到 其 它 问题 中 , 例如, 作 久 (a, o) 中 号 的 有 界 长 区 间 估 计 ， 


《三 ) 渐 近 有 效 的 纯 序 贯 抽 样 方案 ( 续 上 上 段 ); 


Stein 方法 的 一 个 比较 明显 前 不 足 之 处 在 于 , 它 一 共 只 分 两 个 
阶段 , 因而 只 有 一 次 机 会 来 利用 样本 信息 决定 今后 的 计划 , 这 使 我 
们 提出 问题 : 为 获得 正 态 分 布 均值 (方差 未 知 ) 的 长 不 超过 2 而 置 
信 水 平 为 了 一 ca 的 区 间 售 计 , 采用 纯 序 其 抽样 是 否 能 使 平均 抽样 次 
数 更 节省 些 ， 

我 们 首先 需要 树立 一 个 标准 , 然后 去 考察 : 一 个 已 定 的 抽样 程 
序 (如 Stein 二 阶段 抽样 ) 离 此 标准 有 多 少 距离 ， 以 及 怎样 去 遗 出 
达到 标准 的 抽样 程序 .在 正 态 总 体 太 (ac 的 场合 , 这 个 标准 可 
如 下 定 出 : 假定 8 未知, 而 已 知 , 这 时 对 任何 固定 样本 互 b …， 


工 .我 们 用 区 间 估计 四 。 土 -7 和 (此 处 及 以 下 四 ,一 十 启 工 :)， 
其 置信 系数 为 1 一 a 而 长 为 20zoys/ vn。 要 这 个 长 度 <2 世 必须 
是 1 。 


no of 天 一 mo 人 To， 中， 
这 个 mo CD,o, 忆 就 用 来 作为 一 个 标准 , 这 个 标准 的 合理 性 有 Wald 
和 Stein 的 一 个 针 果 为 依据 , 这 结果 ( 见 Anm. Naqih. Statist.1947， 
P. 427) 说 , 不 论 用 任何 方法 ( 纯 序 叶 或 有 限 上 阶段 ) 作 出 的 区 间 属 
. 计 , 其 长 总 不 超过 2 工 而 其 置信 水 平 为 1 一 a, 则 用 这 方法 的 平均 抽 
样 次 数 不 能 小 于 和 (也 o, 内， 因此 , mo (Do, 加 是 可 望 达 到 的 
最 低 限 . 
现在 我 们 来 考察 一 下 , Btein 的 两 阶段 抽样 与 这 个 标准 的 距离 
如 何 ,以 克 记 Stein 抽样 方案 中 的 抽样 次 数 , 则 (以 下 用 必 记 第 一 
阶段 抽样 次 数 ) 
N=—mIa(S) 十 ([S2P1TP] +1)I4(8’), 
此 处 一声 -1( 委 ), I4 和 I 分 别 为 集 4 和 4 的 指示 函数 , 且 
A {6:92 <niL2/F}, 
利用 @ 一 了 So 一 从 -以 站 (| 内 和 天 (9 分 别 记 双 的 分 布 
函数 和 密度 函数 , 得 
HN) >mEK (Glm—1) 
二 人 Pa ahlolm 1) do. (4.38.4) 


此 处 ptm 0) = 并/ 二 ,os， 而 
G=m (mn — 1)/ nol, 0 pu, D1, 
显 热 , (4.8. 作 右边 第 一 项 不 小 于 


Eo Dp lo ©) em 一 Da 


由 此 及 (4.3. 少 得 到 
ENT mL, 0, 内 po 0) BU) 


一 知人 o, pl o). 
由 此 可 知 ， 若 以 比值 0( 工 , go, 外 /如 .ND 作为 Btein 两 辽 段 抽样 
的 效率 , 则 
rol, oT, o) a 1 
EWN) Pins 0)” 


因为 我 们 知道 ; 对 任何 n>1 及 0<<g<1 有 
加 (的 >z0, 

知 当知 >2 时 ,效率 总 是 小 于 1， 而 且 不 难看 出 . o 愈 小 , 这 效率 与 
1 的 盖 距 人 盖 大 ， 

当然 , 最 理想 的 是 能 够 找到 这 样 一 个 序 贯 区 间 司 计 , 其 长 不 超 
过 2 是 有 置信 水 平 1 一 a， 而 其 平均 抽样 次 数 达 到 下 界 mo( oa， 
a) (对 任何 荆 >0, o>0, 0<a< 巧 .这样 的 抽样 方案 未 能 作出 , 但 
如 将 要 求 放宽 一 些 , 这 问题 大 体 上 说 能 有 比较 满意 的 解决 ， 引进 
如 下 的 定义 . 

定义 系 .8.1. 设 六 为 ga 的 一 个 序 贯 区 间 佑 计 的 抽样 次 数 变 
量 ,而 这 区 间 估 计 之 长 不 超过 3 是 有 置信 水 平 1 一 a。， 如 采 


Hm 区 和 全 -1 对 任何 (oo (4.3 .加 


则 称 这 热 立 方案 是 渐 近 有 效 的 . 

这 就 是 说 ,我 们 并 不 要 求 对 一 切 工 >0 抽样 方案 都 是 有 效 的 ， 
而 只 要 求 当 五 >0 充分 小 即 估计 精度 其 高 时 , 抽样 方案 接近 于 有 
效 ,， 如 果 对 有 效 性 的 到 求 作 这 样 的 放宽 , 则 可 以 证 明 : 渐 近 有 效 的 
序 贯 区 间 信 计 存在 , 这 个 结果 的 证 明 比较 复杂 , 我 们 将 只 能 作 部 分 
的 讨论 . 

考虑 如 下 的 抽样 方 案 : 指定 自然 数 mw。 一 次 抽出 样本 莹 ,，…， 
了 ww, 算出 后 ,一 一 及)”， 若 入 之 操 大 /TP 则 停止 
抽样 而 取 区 间 估计 ， 祥 * 土 五 否则 继续 抽 祥 一 次 ， 设 到 抽出 了 。 
时 尚 不 能 停止 而 然 续 抽 出 子 。 则 计算 娩 一 -二 交 ( 和 一 下 


车 n>S3az/IT2 则 停止 抽样 而 取 区 间 估 补 至 . 士 了 否则 继续 抽 
样 一 次 (得 工 s:i、 这 样 下 去 直到 得 出 结果 为 止 ,我 们 把 这 个 抽样 
方案 的 抽样 次 数 变量 可 记 为 六 ( 轧 ， 以 反映 出 其 与 工 的 关系 ( 当 
热 , 访 也 与 a 有关, a 在 此 处 固定 了 ). 

关于 这 个 抽 祥 方案 成 立 着 下 面 的 定理 . 

定理 4.3.23.， 关于 太 ( 加 成 立 以 下 的 结果 ; 


号 衣 ] 各 下 


ee 
Er 


1° Pan (DD) <o0) 一 于 对 尾 何 人， 0), 下 局. 
23" 车 0< 五 < 出 站 (六 因 友 Cs， 又 
Pa Tim ND =00) =l, 


3° Eo oN ON) <o0, 


sp /lim NOD _ - 
PP 


5° Lm (Bs oN (DD) /molL, 0, 办) 一 工 
证 " 对 任何 NP hyy 有 
Pas ND>m -Pe (Msi> Ye)) 


nl Er 
Pe nL/ = Pn -DI /on), 
热 而 ， Ki 十 | 十 了 3 这 里 Fy, "ry 了 了 iii, 有 8 Yu~ NO, 1), 
显然 ;对 任何 4> 由 有 
2 [| 4 
{a> A}C { IP ,> Yi 上 
由 此 得 到 ; 车 了 ~ 六 (0, 1), 则 
Pan — lL <nP (YF | Vn Lo /ros) 
一 3 [1— 人 (vn Lo /zen) ], 


皇 利 用 1— 人 (ev nrg]! (sr>0), 
得 PND >m) 2n[1— BV % Lo /soa)] 

«2 nna/ Do)exrpt nL oT/ Qa2]. 
由 于 衬 R00, 


对 任何 5> 这 一 举证 明了 1° 和 3”, 
3° 的 前 半 部 是 很 明显 的 , 为 还 后 半 部 , 定义 
[Fe {2= (zu To dos “os inf +>0}, 
再 因 以 概率 为 1 地 有 So 1 Ps ot) 一 也 但 显然 当 ri (mys 
wo …) E 介 时 有 lim (ZL) = co, 这 证 明了 2* 的 后 半 
欲 证 42, 注意 出 ->o2(a. 6. Ps) 可 知 ,对 任 给 e>0， 存在 
ka) 吾 


+ 


ee Tr A ee 四 


Pf 代 一 引 a< 有 < 任 七 人 73 对 一 切 %>n(6)} 1 一 #4. 
(4.3.6) 
叉 由 2° 知 存 在 三 >0, 致 
Pao (Lo) >n(s)) 1—s, (4.3.7) 
现 设 太 (了 >n{8)， 则 当 (4.3. 人 0 左边 的 事件 发 生 时 ,有 
NOD—1<S wea TD (T+ 8) oa Te 
= {1+a)nolL, o, @, 
ND Me/ D> (1 — 8) of Di (1—e)noll, o, D. 
1 
由 于 当 工 < 之 财 , 有 碎 ( 四 之 入 (Lo), 故 上 述 推 理 证 明了 


ND NCD ~1 本 
Ee T+ 对 一 切 儿 ocL<L,) 
二 考 ,8.6) 左 边 的 事件 与 (4.3. 站 左边 的 事件 之 交 . 


由 此 以 及 Tim N(ZD 一 ce Po), 可知 


加 NO 
po sx liminf 让 

, NO 
令 s>0, 得 44?. 

根据 4 及 控制 收敛 定理 , 为 了 证 明 5", 只 涡 证 明 -二 
为 一 均值 有 限 的 变量 所 控制 ,显而易见 的 是 
NOD rm 二 (sups) “p20, 

因而 mo 主 多 mL /gens sop 82 
我 们 来 证 明 : 

Ba sup Ss/0"] oo {4.38.8 


还 明了 这 一 点 也 就 证 明了 外。 记 
Y—sup S/o, 


则 PO>WD < Pm). 


= 和 


然而 . 
也 (>ng) 一 (中 7T( 人 站 | e-t/2g0 


<(2"7 CS) emw/# 上 e141 


< ef es +as 
Ir #40 


全 
Oe (672 人 m1, 


于 是 当 y>>4 时 , 有 
PE>Y <D PGi>ng) < <100,, 
车 记 Gy) -POPF< 护 ， 则 
HF) -| sa 的 = 一 | saG-GGD) 


=- G-GG@D)ay<10 | aero| wedy ~ 80. 
这 证 明了 (4.3.3), 因而 5*.。 定理 证 毕 . 

本 定理 的 4?，5” 两 条 说 明 ， 所 提出 的 抽样 方案 的 抽样 次 数 
育 ( 了 DD, 当 工 充分 小 时 ， 本 身 及 其 平均 都 接近 最 优 值 ie 《La, 只， 
县 其 长 为 指定 的 25， 然而 ,另外 还 有 一 个 要 求 , 即 其 置信 水 平 应 不 
小 于 指定 的 1 一 a Starr 通过 数值 计算 证 明 ， 这 个 要 求 木 能 满足 , 
昌 则 在 参数 4, 四) 的 很 广泛 的 范围 内 , 与 这 要 求 相去 不 远 . Simons 
进一步 证 明了 ; 存在 一 个 只 依赖 于 a 的 下 。 她 果 在 本 方案 的 基础 
上 再 增加 抽样 了 次, 然后 仍 以 

记得 样本 的 算术 平均 值 土工 
作为 的 区 辣 估 计 , 则 它 有 置信 水 平 I 一 a， 由 于 lm molL, os, 0) 


一 oo 仍 有 


Bo oN ER, 
ms 


出 此 铺 合 定理 4.3,2， 条 这 样 设计 的 抽样 方案 ， 为 渐 近 有 效 的 ， 
Simons 的 结果 的 详细 证 明 不 在 这 里 给 出 了 {可 参看 [3]). 


二 全 


(四 ) 任意 分 布 的 均值 的 渐 近 有 效 区 间 估 计 


在 (三 ) 中 我 们 讨论 的 是 一 种 特殊 分 布 一 一 正 态 分 布 的 均值 的 
区 间 枯 计 间 题 ，1965 年 ,YY. 8. Chow 和 HH. Robhbina 考虑 了 一 般 
分 布 的 均值 的 区 间 怖 计 问 题 ， 得 到 了 类 似 的 结果 ( 见 4mm. Me 专 ， 
Siatist. 1065, p. 467). 

设 互 为 一 个 一 维 变量 , 对 于 它 ， ,除了 知道 方 路 非 0 有限 以 
外 , 其 它 一 无 所 知 , 要 求 2 的 区 间 和 估计 . 

设 且 !， 于 zs … 为 自 总 体 互 中 的 iid. 样本 ， 若 的 方差 中 


已 知 , 则 可 用 下 面 的 大 样本 方法 : 记 豆 . 一 亏 癌 邢 。 由 于 工 , 研 o 


… 为 i 记 . 且 方 差 中 非 9 有 限 : 依 中 心 极 限定 理 , 有 
> Ca 一 可 I 


NCO, D. (4.8 .的 


设 n 充 分 大 ,使 (4.8.9) 已 足够 近似 ,于 是 可 以 用 部。 “+ nj 和 
为 & 的 区 辣 佑 计 , 近似 地 有 


P(T.— +t J 

而 区 闻 之 长 为 20zaz/M WW。 取 
4 一 不 小 于 osaay/ 天 的 最 小 自然 数 ， (4.3.11) 
则 上 述 区 闻 鸽 计 近 似 地 为 至 . 土 五 好 长度 近 似 地 为 指定 的 327. 这 
与 方差 已 知 时 正 态 分 布 均值 s 的 区 间 估 计 无 异 ， 但 在 分 布 已 知 为 
正 态 时 ，(4.83.10) 成 为 精确 等 式 , 而 此 处 只 为 近似 的 . 又 : 如 果 由 
(4.3.11) 定 出 的 ww 太 小 以 致 性 .3 .多 左边 的 分 布 与 下 (0,， 1) 有 严 
重 偏 差 时 , 可 加 大 m%。 换 句 话说 , 可 选取 mo 而 将 (4.3.11) 修改 为 
9 一 不 小 于 max{no,，o 吉 a/I7} 的 最 小 自然 数 ， 

当然 ,在 五 ->0 时 , moo, 而 这 个 修改 不 必要 


当 方差 of 未知 时 , 用 样本 方差 厨 一 -二 名 (X: 一 于,)? 去 全 
计 它 ,而 仿照 (三 ) 中 的 办 法 作 序 贯 抽样 , 具体 地 说 , 令 
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sae )31—o, (4.8.10) 


VBR+ n=2, 3 {4.3.12) 
指定 一 个 wz2， 先 抽 出 及，…， 并 ,计算 Va 若 Vs<moI2/ 
三 z， 则 停止 抽样 而 以 县, 士 荆 作为 a 的 置信 区 间 . 一般, 设 在 抽出 
了 人 sy 下 1 时 仍 不 能 停止， 叫 继 续 抽 于， 计算 La 车 Fe 
n12/z2o 则 停止 抽样 而 取 字 , 土 工作 为 & 的 区 间 估 计 ， 否 则 继续 现 
察 工 .i， 这 样 下 去 直到 得 出 绪 果 为 止 ， 以 万 (2 记 此 抽 祥 方案 的 
抽样 次 数 变量 , 又 记 ago 了 2 一 (了 要 ，Chow 和 Robbins 证 
明了 下 面 的 定理 . 

定理 &.3.8. 在 上 述 假 定 下 , 有 

1° Pllim tN CD /ntL, Go) =1) =1, 

2° lm(BEN GDI /nL, 0, ®)=s 

3° lmP (yw -Leo Xrwmt+ DD-1i—a, 


前 两 条 的 意思 是 当 工 很 小 时 , 所 定义 的 序 中 抽样 方案 的 抽样 次 数 
及 其 平均 ,都 接近 在 方差 已 知 时 国定 抽样 方案 的 抽样 次 数 , 最 后 一 
条 指出 ， 当 工 很 小 时 所 定义 的 区 间 居 计 近 似 地 有 置信 系数 1 一 a. 
区 间 之 长 为 25 已 包括 在 其 定义 中 ， 
” ”为 了 证 明 这 个 定理 , 先 证 明 以 下 岂 个 引 理 ， 
引 理 4.3.3， 假定 { 了 中 为 一 申 随机 变量 ,满足 条 件 
PF,>0 =1, n=1, 9, «., PlimP,.=1) 一 二 (4.3.18) 
再 设 {f(mw)} 为 一 出 数 , 满足 条 件 
四 给 
7 人 >0 nl, 2 9 my -colim FL. 
(4.8.14) 


及 记 

六 = 六 (各 二 清 足 条 性 Fae f tm/ 的 最 小 3 寺中， (4.8.165) 
网 

1° P(N<o0) =1, 

2” 当 0< 居 页 到 机 了 肝 ， 丰 全) 实 克 人 


在 二 1 有 


em er tie i ee 
Lt 


| 


3° Pim 太 的 一 co) 一 了 lim 召 [的 ] 一 oo (4.3.16) 
o pf FNO) LN 
Pam LO 1) -1 


证 . 考 虐 到 (4.3.18) 和 (4.8.15), 1°, 2° 是 显然 的 ，3° 的 第 
一 式 可 由 
{lim ND- > {tim Y=1} 
推出 ,3° 第 二 式 由 第 一 式 和 单调 收敛 定理 (或 Faton 引 理 ) 推出 . 
为 证 4%, 注意 由 困 从 的 定义 , 当 入 (人 驴 >1 时 ,有 
Pum f NAD) /SLFN ONON DO — DIF sw 
my.) -1 im 由 及 3° 之 第 一 
再 利用 PCim 了 = 一 1 Him 子 各 和 一 荆 以 及 3° 之 第 一 式 , 即 
得 所 要 结果 . 
引 理 和 .8.49. 若 引 理 4.3.3 的 条 件 成 立 , 且 百 (sup 了 ,) <co， 


则 
lm BIN 1 ~ (4.3.17) 
lin . .3. 
i Ff (n) 
证 . 记 了 snp 了。 取 m 至 G2 当 mo 


则 当 六 二 > 和 时 , 有 (注意 不 人 的 定义 ) 
FN ON FON OI AON 的 -DRY 一 十 
2 ww-1<27, 
因此 当 #1 时 ,有 有 
fF OD EA + FOD + fF mY. 
于 是 根据 控制 收 敏 定理 , 由 引 理 4.3.3, 4*, 立即 得 到 (4.3.17)， 
引 理 .8.5. 假定 


a， 下 惠 4.3.8 的 条 件 成 立 , 且 lim (2 一 1 


b. 加 [NCD] <co 对 一 切 #>0, 且 
lmsup [LBANOY yo) /BNO) El (4.8.18) 


+ 坊 20 二 


9 存在 一 列 常 数 mr 致 加 人 > 出 Iim G+ 一 1， 且 Fn Yn 
后 二 22， 3, ”3 则 


lim SL. (4.8.19) 


证 . 任 给 8, 0O<e<l. 到 mn 一 mts)， 司 当 Nr 时 ,六 人 一 了 已 
> fF, fm—D>d—en, gr>1—s, 且 盏 [下 (和 六 wa] 
所 十 有 ) 召 [入 的 ]， 当 tm， 在 集 4={W 人 的 >>m} 上 ,有 


0 WD NO -aN 


SwN DF NG —D /SgroN OF ye < NOY ge, 
因此 


S(O) < me 
< | NOYwwAPE BIN 的 了 ro]， 
人 和 人 wePs 了 INTno]/[BT 的 ) 一 加， 


[ECNOD) —m < BLNOY ye/ LEN (OD) 
一 宫 ] ， 
由 (4.3.16) 和 (性 .3.18) 知 
(1— 8)? Hm gup A lim sup 2 <1. 


Fp 
因此 lim gup 卫 人 多 的 ) <1、 记 到 一 mmiafL Fs), 则 有 0<Ys< 
工 PEP, PFW 3xD 一 1 定义 
六 一 = 僻 卫 局) 的 最 小 整数 n, 

由 引 理 4.3. 和 4 因为 sap 了 ,1 有 

Tm BULAN (DD)] 一 1, 

Fe * - 
由 此 式 不 准 证 明 

lim 2 D1 (4.3.20) 


sl 


事实 上 ， 任 给 e>0， 存 在 加 一 加 (8)， 使 当 m>mm 时 ， 有 工 -ss 
TY t+e. 记 于 ~max f(O), B—{N'() >m), NM 


E[N'(D] = fm (WadP> | (WaP (1— 8) | FWAP 

> {1—8) BLFCN' QO)I— MM. 
两 边 除 以 坟 再 令 t->co 得 lim inf 也 [A 人 的 ] >1 一。， 同 法 推 得 
lim sap 书 凡 《站 <1+s。 由 6>0 的 任意 性 证 明了 (4.8.20) 
再 注意 了 了 因而 和 (入 OD， 有 加 [NW' 的 ] 所 WLN G)], 所 以 
lim inf 一 世 色 ] >1 再 结合 前 面 所 证 明 的 lim sup 宇 [ 六 人 的 1 
<1 即 得 (4.3.19)， 引 理 证 毕 ， 

引 理 生 .8.6 (Ansoombe-Rényi)。 设 瑟 I， 瑟 as … 为 一 串 iid， 
变量 ,如 (于 1 一 而 Var( 袜 让 一 0 0<aa<eco 又 太夫 为 只 取 正 加 
数值 的 随机 变量 , 满足 条 件 


YD >o, 当 jyo0, 


这 里 6 为 一 常数 , 0<0<oo, 则 当 jxoo 时 


Swe 一 站 人 6 LI 
rt Yo 3. 


此 处 名 一 互 1 十 -… 十 研 。 
证 . 不 失 普 记性 可 令 4 一 0, xc 一 1 任 给 s， 0<s< 十 , 取 坟 一 
6(e)>> 一 充分 大 , 合 当 i 时 
PUNO —ot| Sos) «ss. 


， _1 
以 下 为 方便 计 记 5. 一» 取 定 w2>0。， 出 于 


P(S%w < = DP Cs, NG) -), 
当 fh 时 , 得 到 
ae 


ti 


PiSyweD— DD Ps, NOD =n) 


In—cetl<ete 


~ P(St<%, NO) = 


In—ctipcie 
P(N- otot) «se, (4.3.21) 
记 = [etl 一 2) 和 ,Ws 一 [eCL 十 8) 有 N, 则 对 于 满足 |n 一 中 | 过 ct 的 
n, 注意 到 % 守 0, 有 
Pw, NO =m) EP Ee VN +p, NO =%). 


(4.3.22) 
此 处 p= ex ol, 
同样 ， 
PiSew, NO -nwP rv NM —p, NO =). 
(4.3.28) 


根据 foxxoropos 不 等 式 ( 见 [3]， Pp. 285), 有 


Nas— Ni+1 
Pp MNiev) < de N+l CoV 
> ve 人 < WTA SS5V 8， 


定义 事件 R= {p< MWeW)}, Q={|N(D -ct|<oie}, 
则 有 PC(S%w<oD) <P (SY, <a N+ RNQ)+6Vs, 


1 
PlSyw ET) PO Ss— 8 RN —s, 


< 及 PCRN>>1-6 V5, 有 


注意 到 了 


POS 入 < 一 et 一 ?Vs P(e) 


<P(S5<eW Ta:+ av) +6、 e. 
令 i>o0 (因而 刘 :>o0), 然后 令 a30, 得 
Hm PN) = 二 {9). (4.8.24) 
以 上 假定 了 zz 这 0。 车 “<0, 则 只 需 将 性.3.232) 式 右边 的 MBNs 疏 
为 wwai， 把 导 .3.33) 右边 的 vVAa 改 为 wa， 以 下 各 式 作 相应 的 
改动 ,最 后 仍 得 (4.3.24)。 引 理 证 毕 . 
定理 4.3.3 的 证 阴 。 


3 


人 SFP/o’, Fn) =n, t—n(LD, 0, a) —0%22/T12, 则 Chow- 
Robbins 抽样 方案 中 的 抽样 次 数码 为 
可 一 请 四 一 使 了 所 站 (rm) jt 的 最 小 自然 数 . 
于 是 由 引 理 4.3.8, 4° 立即 得 到 定理 的 结论 1”. 其 次 ， 
Plyn~— LEEnt+ LD) 


~P (2 (Rwn— a) MOL) 
o oF 


由 定理 已 证 部 分 , 知 lim 立 2 -1(a.e) ,因而 VRTC Ze 一 
siaka. 9.)。 于 是 由 引 理 4.3.6 得 
lmP (Kym Le HutT) =I—6, 


这 证 明了 定理 的 3”. | 

为 了 证 明 2?， 固 定 这 -0， 取 mw 人 悚 当 nm 时 f(m) 一 
>1， 取 56>0 癸 (4 一 了 一 了 = 5 一 了 ?于 6n n>2)， 对 任何 
fh 定义 亚 一 min( 直 的， 门 ， 由 于 事件 { (的 = 隔 只 与 下 3 
…， 于。 有 关 , 故事 件 { 开 = 证 也 只 与 下 …， 王 s 有 关 ， 于 是 根据 
Wald 等 式 ( 引 理 3.7. 辣 

及 bp (Zo)’) -BONDE(I 0) BM) 

因此 根据 了 的 定义 


BMYW) -证 E[S(X,— T+ 1] 


< 证 到 记 (CEe-a7+i] -BOGD+ 古 . (4.3 .2 本 


一 工 
[9 


令 9( 一 一 一 ,n>23, 则 


1 et _ a 1 1 #=1 至 工 
Ye 人 (ZX 玉 s) +7 (Zi + 


一 各 了 ,a 一 g(m) 了 ,1( 引 理 4.8.5 条 件 0). 
所 以 , 注意 到 也 (0 的 定义 ,以 及 当 > 加 时 了 GD) > 和 得 到 


和 


BCM7a=-| rrTdP+| GZrodaP 


> PCGO>nD+ NOY ywdP 


NEIST} 


Wr 


PrP(N (D>r) +f{ Ng ND) LRN) —1) 


entery 


dP>rPN 的 > 人 十 人 | on aD, 
因此 由 (4.3.25) 


3 snap 1 
| GaP> 了 | we MDaP Ea 


和 四 
>37(| ,0 NaP ) oY 
全 全 得 知 EB[N(OD] 天 oo。 (4.3.26) 


理由 Wala 等 式 有 如 [W 的 了 wo] < 召 [N ()] 二 二， 因此 由 
(4.8.16) 第 二 式 , 知 : 
lim sup [ECN(DY ym) /ENO El (4.3.27) 
由 (4.3.26) 和 《4.3.27) 知 引 理 4.8.5 的 条 件 b 祷 尽 ， 因 此 引 再 
4.3.5 一 切 条 件 都 满足 , 于 是 得 到 
lan DIN 1, 


注意 到 上 即 为 ntL, 0, 的 ， 上 式 即 定理 4.3.3, 2*， 这 就 完成 了 证 
理 4.3.3 的 证 明 . 


(五 ) 具 任 给 可 靠 度 和 精度 的 区 间 估 计 的 存在 问题 一 一 预备 襄 项 


设 变量 下 ( 瑟 不 必 是 一 维 的 ) 的 分 布 为 了 , 84 了 ) 是 一 个 由 分 
布 决定 的 数 (比方 说 , 2(ZD) 为 分 布 五 的 均值 、 方 姜 之 类) 一 
般 , 分 布 五 恢 喜 有 限 个 实 参数 , 例如 双 为 克 4, a ,依赖 两 个 实 
参数 & 和 ca?， 然 而 ， 对 此 处 要 考虑 的 同 题 来 说 ， 这 一 点 不 基本 质 
的 , 因而 我 们 不 炉 一 般 地 就 假定 分 布 玉 属于 一 个 分 布 族 多 .这 样 ， 
8(F) 是 定义 在 多 上 的 取 有 限 实 值 的 函数 - 


ms 


设 下 王 a 是 三 的 这 . 样本 ,要 作 8 的 区 阅 佑 于 , 设 
配 是 某 一 种 抽样 体制 ,如 固定 抽 祥 , 阶段 抽样 , 序 贯 抽样 之 类 ,车 
对 任 给 的 s>0 和 a，0<a<1, 必 存 在 抽样 体制 如 之 下 的 、94B) 
的 一 个 区 向 估计 ， 使 其 长 总 不 超过 s 而 旱 信 水 平 汶 1 一 ag， 则 称 
2 在 抽样 体制 仿 下 可 以 精确 而 可 此 地 估计 ,并 记 为 8) E86. 

例如 ,车 以 久 记 国定 样本 抽样 (注意 ;样本 大 小 未 加 限制 ), 则 
9) ED 的 意义 是 ， 对 任 给 8>0 和 ao，0<a<1l, 存在 ”及 基于 

… 本 的 区 间 和 估计 

Eee( 间 za …， 王 由，8( 避 1，…， 六 直 
致 PtG(XE1 EF) Eb (RD, ,1a, 
对 一 切 FE 多 ， 且 和 了 1， 素 和 一 4( 玉 1，…， 卫 小 攻 # 对 一 切 
( 受 1,， 证 。)， 注 意 瑟 处 名 与 8, a 有 关 . 

在 这 个 定义 下 ，Dantzig 的 定理 可 写 为 车 多 为 正 态 分 布 族 
{Nla, oD, ~<a<o0 o>0), 而 9 =g ( 当 奈 为 下 (全 
0 时 ), 则 8CF) ES 和 若 以 必 , 记 两 阶段 抽 洋 体制 , 则 Bteia 的 站 
果 指 出 80 €55. 

以 后 我 们 总 以 Ss 记 血 芥 自 抽样 体制 @w 二 时 即 为 固定 样本 
近 样 ), S。 记 序 贯 抽样 体制 . 

我 们 要 讨论 的 问题 是 ， 当 给 定 了 一 种 抽样 体制 瑟 时 ， 找 出 
CD) ES 的 条 件 ， 我 们 将 看 到 ， 这 种 条 件 与 9CF) 作为 分布 也 的 
通 数 的 某 种 连续 性 有 关 , 因此 先 讨 论 这 个 问题 , 为 行文 简便 假定 于 
为 一 维 变量 , 当 工 为 到 维 时 ， 一 急 续 果 都 有 效 ， 

引进 无 限 维 欣 民 空间 ， 

R,= {2= 【za Vs 。 eso, 人 二 1]， 2, + 
关于 这 空间 中 的 Borel 集 记 构 成 的 o- 域 用 .， 以 及 出 一 舅 Borel 
柱 形 集 构成 的 o- 域 有 om 的 定 义 ， 已 在 83.7 (一 ) 中 给 出 过 了 ， 设 
也 的 分 布 为 卫 , 则 (于 1， 了 于，…') 在 多 .上 的 概率 测度 以 Pf 记 ， 
而 (及 1 胃 收 在 绝 (w 上 的 概率 测度 以 PD 记 ， 

现在 设 丸 为 任 一 序 栅 (包括 w 阶 段 ) 抽 样 的 抽样 次 数 变 量 , 在 
$2.7 中 《 见 定义 3.7, 力 我 们 指出 过 , 要 本 能 作为 这 样 的 变量 , 充 


a 


PT 


要 条 件 是 
{N=n} EE Bi, n=1, 2 
以 后 我 们 总 假定 {= 他 一 和 ( 空 集 ), 但 一 开始 并 不 排斥 六 可 以 
为 co 的 情况 , 考虑 BE, 的 一 切 形 如 
站 一 的 UGsU…UC 

的 集 ， 其 中 和 和 C{ 让 = 如，BE 壤 0 2, oj， 
GE 均 .、 显然 ， 一 切 形 如 这 样 的 妇 构 成 一 个 闻 域 ， 这 个 5- 域 记 
为 芍 mm， 注 意 绍 ow 随 每 一 个 有 基体 的 六 而 定 . 

设 本 ,Fy 为 .多 中 尾 意 两 个 分 布 ,定义 一 系列 的 距离 

dps FO) sap |PRCD ~ PE n= 2 

dP, Fe) 一 sup| P(A — PotA)|, 

dx (F's, Fs) 一 ab, [PE Ca) ~ POCD |, 
吧 奸 定义 DP, Fa) 一 mp ,Flo) — F(z)}, 
易 苑 

do Fs Fo ds, Fo (FP, PF) 
> DP, Fa, (4.3.28) 

现在 引进 下 面 的 定义 . 

定义 .3.1. 设 (C8) 为 定义 在 .上 的 有 限 实 值 阔 数 ， 
Fo 多. 若 对 任 给 s>>0， 存 在 9>0 臻 

FEF, db, Po ny OF) 一 有 Co | se, 

别称 84 了) 在 Fo 处 dd 连 续 ， 关 于 8(F) 在 多 上 人 连续 、@ 一 至 
连续 ， 以 及 关于 在 距离 五 之 下 的 连续 性 和 一 臻 连续 性 等 ， 都 按 遂 
常 的 方式 加 以 定义 ， 

由 此 定义 及 (4.8.28) 可 知 : 若 8 的 在 本 处 (在 多 上 ,一 致 ) 
路 连续, 则 它 在 Fo 处 (在 多 上, 一致) 呈 -连续 但 其 道 不 真 : 由 距 
离 了 意义 下 的 连续 狂 不 必 能 推出 距离 部 意义 下 的 连续 性 . 

为 了 今 技 的 逢 要 证 明 以 下 几 个 引 理 ， 

引 理 和 .3.7. 设 为 任 一 自然 数 , 则 对 任 给 s>4 存在 9>0 人 0 
与 有关, 当然 也 与 a 有 关 ), 致 


dF, FD en Fy 8, 
证 . 为 了 证 明 , 需要 下 面 的 事实 ; 


d(Ts, Fo) = snp] oaFD -| pO ara) |. (4.8.29) 


这 里 委 为 一 切 定 义 于 (一 co， co) 的 , 取 值 于 [0, 了 上 的 Porel 可 测 
函数 的 类 , 这 事实 证 明 如 下 ; 依 定 义 , 存在 一 吊 集 有 BE€ 洽 0, 4 了 
2, + 致 
IPR (BD) — PR(BY| > (Ps, Po)， 当 多 roo。 
定义 中 一 ZT5( 有 ， 知 当 和 xoc 时 ， 
[pear -六 mazmG| = IPRBY PRB)! 
> (Fy, Py. 
这 证 明了 (4.8.29) 的 右边 不 小 于 出 (Fi。 Fa), 反 过 来 , 设 pE 甸 县 
有 启 aTs, 的 形状 , 则 


全 wam@- 人 GapaG -Bm PRBD) -PEED)) 
< PRBD) ~ PRE = PEOU'ED — PEOU'ED 
= snp [PR (OD — PROD) | = (Fh:, Fs). 
此 处 器 和 U' 表示 只 对 适合 条 件 和 ( 轧 ) 一 了 名 (BD >0 的 那些 
j 求 和 , 同 法 证 明 
[vwar0@ -| gad8s > dn, Fo), 
放 对 一 切 上 述 形状 的 pE 几 有 
[pa -pWar | <a Cm,, 四 ， 
由 测度 论 知 此 式 对 一 切 oE 古 对 ， 这 与 已 证 部 分 结合 ， 得 出 
(4.3.29). 
现在 用 归纳 法 来 证 明 本 引 理 , 设 
sop{| PRED (A — PRD CA) | | AE Bm yD, dh (Fs, Fo) 二 时 
= O01(8), | 
在 志和 


当 s >0 时 趋 于 0， 任 取 4E 乡 mw 依 Pubini 定 再 
PR C0 ~PRDI=|| PR? ADaF, OW 
-[ Pr?CadarD |<f IPE ND 
— PEDAD IGF1(D+ | 人 Per {ADAF, (#) 


-全 Po? (AD dF (tf) | 一 狗 士 加. 
此 处 4 为 集 和 4 在 互 :一 的 截 口 , 因而 4;E 人 Bw，、 依 归纳 假设 有 
所 On 1(5)， 又 因 0<P 了 和 DCD 1, 由 (4.3.29) 知 g 所 (By 
Fa) 8, 当 dE, Fs) 8, 因此 当 dB, Fy) < 二 时 ， 有 
[PR CA) — 了 PR (A) | Ol 《8) 十 By 
于 是 得 到 
Ole) EO 1(8) 于 8 >0， 当 5 一 0. (4.3.30) 


这 完成 了 引 理 的 归纳 证 明 , 注意 由 (4.3.30) 我 们 看 出 CO,(8) <n8， 
即 


(Fs, Fo Ee dh, Fe) ne, (4.38.31) 
引 理 &.8.8.， 设 为 一 封闭 的 序 贯 抽样 方案 的 抽样 次 数 变量 
《( 即 Pr(N <o0) 一 1 对 一 切 了 EF), 则 对 任 给 FoE 及 a>0 存 
在 9 一 n(8, Fo)， 致 
di(F, Fo rr (F, Fo) 8, (4.8.32) 
车 Hm Pp(N>>K) 一 0 一 致 地 成 立 于 .多 上 ， 则 站 可 取得 与 Po 无 
关 . 
证 .由 不 的 封闭 性 , 存在 了 致 P92YCN> 区 ) 之 襄 。 此 处 下 
可 以 与 Po 有关, 任 取 4E Sr. 根据 定义 , 4 一 由 4 4sE€ Bw, 且 
44 忆 tH 一 计 ， 根 据 引 理 4.8.7, 存在 59>0, 使 当 d( 了 Fo) 所 9 时 
dr(F, Fo) < 5 由 于 了 P(NW>K)>P$ (L149; 有 


PPC0> 当 (0>[PRC -这 
~ 高 PRC40 -总 - 习 PRCD -六 ,PRO -- 瑟 
= PC 一 PP 一 襄 >PPPC ~s. 
因为 AE 级 w=>4EByy， 有 
PP(A) > PEN(A) —s 
即 了 (CA) < PE Gd) 十 
共 而 得 到 |PPD (4 一 RD (4|<s， 由 4E 纺 wm 的 任意 性 知 
(4.8.82) 成 立 。 引 更 的 后 一 部 分 由 区 与 Bo 无 关 推 出 . 


(六 ) 9(F) ES (固定 样本 ) 的 条 件 
定理 4.8.4(Singh)、8(P) < 总 的 上 必要 条 件 是 8( 丽 为 凤 - 一 
致 连续 于 多 上 . 
证 . 任 给 # 记 0, 由 NYE BN: 知 存 在 如 下 内 一 2 a) 
到 . 
PP(|B.—0 (F) |<$)>2. (4.3.33) 
找 7>0, 使 当 出 (Fu 了 cm 时 , 有 邮 (Pa， 民 2) 窒 于 ( 引 理 4.3.7) 
则 当 名 (Fs) <% 时 ,有 
PRU 907)1< 生 ) 一 PR(I6-00mD1< 委 < 地 
这 时 _ 
PR(|-0(F) | 和 ,1-0(PD)| < 各) 
> PR(IB-0m) <)+P® (9F)1<E)-1 


>PR(I9.~0(PD1< 委 -于 + PR (I~9CPD Ts 总) 


号 1 多 i 
> 1" 这 
因此 , 集 


{e， Wy wn) |B (1, ry oo) — 0(P) | < [B,C 本 Zn) 


-0(PD| < 各 | 


非 空 , 这 显然 说 明 |8CF) 一 8(8a) 1 ss， 从 而 证 明了 定理 . 

Singh 的 这 个 结果 是 1968 年 发 表 的 ( 风 Anm. Moth, Statist. 
1963, p. 1474)。. 1966 年 , 本 书 作 者 建立 了 下 面 的 充分 条 件 (< 科学 
通报 >，1966 年 ，465 页 ). 

定理 4.3.5. 若 日 (本 在 .多 上 了 -一致 连续 , 则 BT ESr， 

证 . 任 给 8 这 0 及 a, 0<a<li,， 挠 70 至 

DBR, Fo en (CF) 0(F2) | Se, (4.3.34) 
根据 Kozworopog 定理 (定理 3.5. 引 ,存在 m， 使 着 以 吾 记 一， 
寻 s 的 经 验 分 布 画 数 ( 所 定义 3.5. 芒 ， 则 


P P(_ sup {Fw) — 久 (wm) > 全 }<o (4.8.85) 


现在 取 定 % 为 样本 大 小 , 作 区 同居 计 [9,, 7] == [8,( 卫 I， …， 下 
(1 如下; 有 了 样本 下 1，……*， 玉 后 , 取 
QAKs, oo, Fo = {PFETF, Sup IF(o) —B(e)!<n/2} 
—-{F:FESF DE, Fy/2} (4.3 .38) 
著 息 (41 下 四 为 空 集 , 则 令 [B 相克 ( 丁 1 是 本 ] 
= [0， 引 , 任 则 令 
[6.1] 
二 包含 集 {0() :EQCRI -…， 革 ,)} 的 最 小 闭 区 间 ， 
| (4.8.37) 
Hi (4.3.8 人 0 (4.8.85)，(4.3.37) 知 六 一 8, 所 6。 另 一 方面 ， 
PE OEP) EH) 2 PHDE, P</2), 
后 由 {44.3.835) 即 知 
PP DEO) 1, 
这 证 明了 记 要 的 结果 . 
由 于 && 和 了 两 种 意义 下 的 连续 性 不 等 价 , 以 上 两 定理 中 的 条 


" 331。 


ee 


件 有 差距 , 至 今 尚 未 能 得 出 简单 的 充 要 条 件 ,， 然而 , 在 有 些 和 情况 下 
《〈 即 对 某 些 有 具体 的 分 布 族 多 ) ,这 两 种 连续 性 等 价 ， 因 此 这 时 定理 
中 的 条 件 是 充 要 的 , 下 面 举例 说 明 这 些 定理 的 应 用 . 

例 4.3.1， 我 们 用 定理 4.3.4 来 证 明 Dantzig 的 定理 ， 为 此 
注意 : 车 以 g(t) 记 交 人 0 了 的 分 布 阔 数 , 则 


深信 ie+ 及 -Colaz=-o (4.3.88) 


这 个 简章 事实 的 证 明 留 给 读者 , 现任 取 4 为 任 一 个 一 维 Borel 集 ， 
则 
|Pa,» (4d) Pon(d)|= IP ez,ntds) ~Po.v ltd) |, 


此 处 Po olB) 吾 示 当 无 ~ 入 (4 0 时 , 也 落 在 B 内 的 概率 而 
4 一 {eon€E 4}， 由 (4.3.38) 得 
aupl Pa (A) —Po,n td) | =sopiP 他 D4) Pwo.n Cd) 


(Dr se 


就 是 说 , 当 o 很 六 时 ,两 个 分 布 而 ~ 六 (中 入 ~ 和 00, 中) 的 了 
距离 任意 接近 , 但 Gu 一 1 和 (FD 一 0 并 不 接近 , 故 8 一 殖 
的 均值 (4) 这 个 函数 并 非 吧 - 一 致 连续 ， 由 定理 和 ,3. 和 4a， 这 
就 是 Dantzig 的 定理 . 

四 这 个 方法 可 以 证 明 : 著 有 GBFD) 一 h(@) (到 一 到 (ao ) pg) 
为 & 的 任 一 次 数 ,不 恒 等 于 一 常数 , 则 必 有 98) 区 四 

例 4.3.23. 我 们 证 明 ; 在 上 题 中 车 令 

OF)=logo, 当 F~N(g, a), 
则 62) ES， 为 此 注意 :车 了 i 恤 NG 0) FN (ma Fo), 
并 DCF 了 Fa 一 0， 则 必须 ?1 (不 考 虚 上 的 负 值 ), 事实 上 ， 易 见 
存在 5 致 安 为 二 (0, 1) 的 分 布 ) 
DF, Fa) = sup [Bn) — 人 GCs) |, 


与 有 关 , 为 确定 计 , 设 zi+e a>0. 车 |elzzs/3 则 | 外 (w) 


生性 计 人 2 


一 5(kz 上 go> 加 号 ) 一 @(0， 若 io 中 <s/2, 则 
15) -Ghrto) es (Lt ) -S01). 


这 样 DCF,, 3) 不 可 能 任意 接近 于 0. 因此 必 有 >1, 这 时 19(F) 
一 9CFD) | 一 11log ko 一 lo0g o>0， 因 而 证 明了 6《) 一 logo 为 从 
一 致 连续 ， 依 定 理 4.3.56, BE ED. 

例 4.8.8. 设 多 为 Peiseon 分 布 族 {Pi: 和 >0}, 妈 P(X = 且 
一 b=0, 1 2 …. 令 


OPY-A, OPY)=log%, dtlPo) =—e "aine,. 

先 讨论 外 . 任 取 和 二, 不 难看 到 , 存在 非 负 整数 和 使 当 所 
时 ，Pn《D 汪 Pl) 而 当 上 > 时， Pn(D <<P(B). 记 4= 0, 
1 科 ,， B 一 区 十 1，# 十 2 小; 则 易 见 

dP PO 一 PC4) 一 PaCd) 一 Pa(Cd) 十 Pu(CB) 一 工 
但 (注意 加 盖 Ag 

PE) 一 ee We ms/AE!. 
匡 此 dd(P,, PA Sem HP Atem WP.B) 一 工 一 6 和 一 十 。 
这 说 明 当 Gd(P， 卫 一 0 时 ， 必 有 | 入 一 ?| 一 9， 因 而 OP ) 一 和 
为 中 -一 致 连续 的 . 

现在 我 们 和 证明: 册 不 是 卫 -一致 连 续 , 取 和) 一 入 Na 一 +I 且 
令 jco。 由 于 


lim P， (Se) -00), 
有 lim 一 人 im 三 人 
易 知 五 (P， 了 一 0， 当 >co， 但 19(P 一 8(P) 一 1>0， 当 
%>co， 这 证 明了 和 负 不 是 了 一 至 连续 ， 册 这 个 例子 看 出 : 9, 卫 两 
种 连续 性 不 等 价 . 
因此 , 对 由 是 可 属于 部 的 问题 , 定理 4.8.4 和 定理 4.8.5 都 
回答 不 丁 , 故 而 , 可 以 直接 证 明 : 外 蕊 六， 为 了 证 明 这 个 有 趣 的 结 


EE 


果 , 项 要 以 下 两 点 预备 事实 . 
a. ,op. 也 (太志 和 二 之 1 其 中 瑟 一 疡 ， 


苞 击 对 任何 六 > 有 PLX 志和) <1， 以 及 由 中 心 极限 定理 得 出 的 
事实 lim P(X <<n) 一 去. 

b., inf er"(l+ 记 ) 0>0. 
| log(e™ Qtr 二 ) )= 一 见 十 ?ts log(1 二 二-) 0， 当 9 一 oo， 


现在 取 e- 半 及 wo，0<a< 了 导 二 了 2 任 取样 本 大 小 m, 若 存 
在 区 闻 信 计 (于,，…， 区 二 工 其 回信 水 平 为 1 ao, 记 


41={ es 四 aa) :| 下 (oa wy Ln) 一 了 | 所 3 
站。 a { Cy ny Wn): (01 ""y wy) E Ane, 所 十 … :wn ny, 
根据 预备 事实 gg,， 有 加 (A4w 一 妆 ) 拟 7,. 故 必 有 
P(A = PH AD — PO (Am A) 1 ry. 
而 对 性 何 k1, Py en, 万 十 …* 十 3983 CEs 为 非 负 整数 ), 有 
Parit i=— Rk, ny 下 一 如) /Pr( 古 1 一 E, ey 区 
一 6 人 tt er (二 二) 6. 
所 以 Pd) > PA) PP (A > ~o oD). 
再 注意 到 4 人 rl 二 儿 有 
PA CAn UU dwr = Pi 《do 十 三 5 (4 二 
>01—e~nD +1-0>l, ec. 


这 个 矛盾 证 明了 : 不 论 取样 本 大 小 多 大 ，X 的 长 不 超过 寺 而 中 


信 系数 为 1 一 0 的 区 冰 估 计 不 存在 , 这 证 明了 负 记 58。 这 个 例子 说 
明了 Sin gh 定理 中 的 条 件 确实 不 是 充分 的 . 

我 们 留 给 读者 自己 去 验证 , 册 和 负 都 为 也- 一 致 连续 , 因此 
从 ,0s 都 属于 8:。 这 后 一 情 襄 特别 有 趣 , 因为 , 由 C- 琴 不 等 式 , 不 


。 = 


论 样 本 大 小 % 邵 何 ,基于 样本 瑟 1， …， 和 的 让 的 无 偏 估 讨 ,其 方 
差 不 小 于 
VO 一 全 (ooso 一 esine3. 
由 于 sup [Co0ge*—e *eine”) 一 o0 (请 读者 验证 ), 可 知 : 要 找 出 
Bs 的 方差 一 致 有 办 无 偏 佑 计 , 在 固定 样本 不 可 能 , 所 以 , 一 估计 问 
题 可 以 在 区 间 估 计 范 围 内 在 原则 上 有 满意 的 解 央 ， 而 在 点 居 计 中 
划 香 . 
(七 ) (CF) ES ( 纯 序 叶 样本) 的 条 件 


定理 4.3.6 (Singh)。 若 8( 相 E56 则 CF) 为 而 -连续 于 
g 


证 . 这 个 证 明 几 乎 是 逐 名 重复 定理 4.3.4 的 证 明 ， 设 
及 = 信 ( 了 。，…， 于 四 而 十 各 为 8(F) 的 置信 水 平 为 2/3 的 区 间 


估计 ,此 处 自然 假定 外 为 绍 on 可 测 的 , 根据 引 理 4.3.8, 对 任 第 
4oE 多 存在 %>00m 可 以 与 Ho 有关), 至 


dh, Po Sn dy(D, PO < 
由 于 {Co mo 10) (PO) |< 二 | E 妇 om 有 
[PP (leCzo | 和)-P (0 一 0(CFoO1 < 号 )| < 二 
这 时 
Pp (16"—0(F) | <$, 0 -0(7) | <#) 
>P (12 一 0CE9 < 可) 十 PS (9AF)|<§)-1 
>>PJ (I-98)1<$) -4+P (10 一 9 < 号)-1 
2 工分 1 
六“ 了 +- 
因此 ,和 集 


上 935 a 


{e mo 10 -9(P9| 
< 和 10 (0 1 0) 0(F)| < 各 | 


非 空 ,于 是 18 一 8CFo) | 忆 #8。， 此 对 任何 击 (Fo) 吃 nm 成 立 , 因 
而 证 明了 ez) 在 5o 处 的 连续 性 ,定理 证 毕 . 

Singh 在 其 前 面 所 引 的 工作 中 猜测 ， 本 定理 的 条件 对 
9(CF) E55 也 是 充分 的 , 然而 ,本 书 作 者 否定 了 这 个 薄 测 , 他 举例 证 
明了 : 甚至 外 下 在 多 上 的 8 一 致 连续 性 也 不 足以 保证 多)EN。 
〈 见 <* 中 国 科学 > 1965 年 了 月 号 所 载 作者 的 文章 )， 

然后 , 本 书 作者 证 明了 下 面 的 结果 (科学 通报 >，i966 年 , 465 
页 )， 

定理 生 .8.7. 车 8( 本 在 .FF 上 为 DD 连续 ,出 608) ES 

证 . 对 任何 由 以 急 = 扬 (wy 记 如 ，…， 的 经 验 


分 布 沟 数 , 任 给 8>0 及 a 0<a<1. 找 m>0 il 2 … 致 疡 


a 二 &。 由 定理 3.5.5 可知, 存在 一 串 {中 }， a 之 0s>…， 致 对 任何 
和 存在 mn: 
PED (EB,, F300 Sm $=1, 2, 

县 显然 可 令 出 过 fg 之 *…， 

现在 定 关 一 个 序 芙 抽样 程序 态 和 区 间 居 计 [Ts, Ts] 如 下 ， 

1° 首先 现 测 互 ， …， 开 sw， 考虑 集 合 

ACERs, -7 Fm) ~ {F, FEFI DDB,, F) en), 

A (Ki, 下 一个 (四 PEACEL, *, TL)), 

甩 ( 芋 1 玉 m) 一 包含 4*( 及 1， …， 下 ww) 的 最 小 闭 区 间 ， 
车 有 4( 慎 1， 下 区 针 且 冯 ( 下 了 ) 之 长 所 8 则 停止 抽样 
而 取 CT4C 玉 ), Ta( 玉 )) = 有 (TI …， 于,)， 否 则 

2° 观测 耳 。w1，…， 玉 。， 按 3" 中 的 规则 决定 是 否 停 止 . 

3° 一 般 , 若 在 观察 了 卫 1,…， 玉 ,后 仍 不 能 停止 , 则 继续 观测 
于 tly" 卫 mw 而 考虑 集合 征 ( 王 2 下 no); A*(1*…， 王 40) 
和 (及)， 车 和 (加 4 三 ws) 呈正 上 县 村 ( 卫 by 于 4) 


| 


人 EARL 


之 长 所 则 停止 抽样 而 取 [Pio ，7s (四 ] 一直 (下 站 ss。 
否则 继续 观测 下 wt1，…， 下 ,se 
我 们 先 证 明 8 的 封闭 性 , 以 玉 记 5 的 抽样 次 数 变 量 , 要 证 明 
对 征 何 Fo 名 有 
lm P(N>® -0. (4.3.89) 


由 (FF) 的 呈 连续 性 ， 对 给 定 的 8>>0 存在 (与 Fo 有关 的 ) 9>>0， 
使 当 DDCF，Fo) < 了 时， 有 18F) 一 Co | 吃 8/2， 取 知 完 分 大 致 
tn， 则 当 针 wp 时 , 若 FoE 全 C1 革 CX1 
中 任 一 个 玉 都 满足 卫 (F，Fo) 之 m， 因 此 由 人 5 的 定义 知 
让 (再 i，…， 下 之 长 必 所 a 于 是 当 6> 轴 时 ,得 到 
{N>m TC{FoE ACE 下) 
十 人 RDBE,, Fo 6), 

从 而 PEON >n) < PED Fo) >0%) Soar20, 
这 证 明了 《4.3.39) 因而 5 的 封闭 性 , 其次， 

{wrE BR OFo) ET), TP)]} 


二 (<co) Yo: DB,, Po) ou), 

由 上 面 已 证 的 封闭 性 知 

PE (%) <0 (FP0) ST 0) > PE DB,, Fo en) 

> 一 站 PSY DB,, Fo 0) >1~ Du-1—o, 

故 知 区 间 佑 计 [Tz, 2] 的 置信 水 平 为 1 一 w， 定理 证 毕 . 

下 面 举例 说 明定 浊 4.3.6 和 4.3.7 的 应 用 . 

鲍 4.3.4. 以 天 记 一 切 其 均值 存在 有 限 的 一 维 分 布 的 全 体 ， 
而 2 (ZI = 了 的 均值 。 早 在 1956 年 ，Bahatnz 和 Savage 就 曾 证 
明 ,9(B) 8。 这 个 结果 很 容易 从 定理 4.3.6 得 出 ,事实 上 , 游 以 
了 Bo 记 概 率 全 集中 在 0 的 分 布 ， FF 记 一 个 一 维 分 布 , 取 0 和 的 报 
率 分 别 为 1 一 二 和 工 ， 则 易 见 有 二 (PP， 瓦 ) 一 0， 当 srwco， 但 
dB) 一 Ti>0 一 9CFo)。 


人 


例 4.3.6. 以 .多 一切 其 中 位 数 叭 一 的 一 维 分 布 族 , 8(F) = 下 
的 中 位 数 , 虽 见 BE 为 办 连续 ,因此 根据 定理 4.3.7, 6(F) € 9。. 
然而 ，Earrel 证 明了 : 对 任何 mm, 8(F) ES,. 

例 4.3.6. 以 .多 记 一 切 形 如 Po(D=1 一 P,(0) = 及 0<8<1 
的 分 布 的 族 , (Pe) 10g 9, 0<8<1， 显 而 易 见 及 (Po) 为 DD- 连续 ， 
由 定理 4.3.7 知 忆 Po) ES 现在 证 明 ， 对 任何 各 1， 玉 局 站 mw 
这 是 因为 显 而 易 匈 ， 由 于 分 布 Pe 的 概率 集中 在 两 个 点 0 和 413， 由 
ESn 将 得 到 加 E SI 而 由 定理 24,3.4, 这 将 推出 天 在 .多 上 -一 
艇 过 续 , 但 这 显然 是 不 正确 的 . 

另外 ,Blum 和 Rosenplatt 及 本 书 作 考 研究 了 98(CF) 和 8 的 充 
分 条 件 。 本 书 作者 证 明 的 一 个 充分 条 件 可 推出 下 面 的 结果 : 若 户 


为 一 已 知 的 一 维 连 续 分 布 而 .F -{f.0) = 7( 8): 一 co<a 


00,0<b<oo, EN = gh 0), 9 为 定义 在 {(8, 5) :一 co<a 


三 00,0<b<co} 上 的 实 值 连续 函数 , 则 8&3. 这 包含 了 不 少 文献 
中 半 见 的 特例 。 


人 


第 五 章 线性 模型 


§$5.1. 引 证 


有 一 类 在 应 用 上 很 重要 的 统计 问题 ， 它 们 的 理论 模型 有 一 种 
在 下 面 要 加 以 精确 定义 的 线性 结构 ， 在 统计 文献 中 ,习惯 上 常 把 
它们 归 之 于 “线性 模型 ”(ELinear model) 的 名 称 下 , 本 章 的 目的 就 
是 叙述 这 种 线性 统计 模型 的 理论 基础 ， 

为 了 自然 地 引进 线性 模型 的 概念 , 我 们 举 一 个 简单 例子 设 
我 们 要 研究 一 种 农作物 的 亩 产量 了 与 亩 施肥 量 = 的 关系 , 我 们 假 
定 : 在 = 的 一 定 范围 内 , 了 的 平均 值 豆 (z) 与 4 的 关系 近似 地 可 
以 用 线性 函数 来 表示 : 


ET) 一 名 二 bo ‘5.1.1) 
为 了 荐 重地 说 明了 的 平均 人 与 有 关 ， 可 以 将 召 (Y) 写 为 如 
CY | 及 ,而 将 本 -1. 了 ) 写 为 BY12) 一 2 十 罗 . 
为 了 帮助 理解 象 近 .1. 蕊 这 样 的 关系 , 我 们 对 之 作 几 点 简单 的 
说 明 . 
首先 , 变量 了 与 之 间 是 有 关 的 .表现 在 , 在 一 定 的 范围 内 ， 
z 丛 大 , 了 一 般 也 傅 大 ， 然 而 , 这 关系 并 未 确切 到 给 定 w 就 可 以 唯 
一 地 决定 了 的 程度 ,因此 , 2 与 了 的 关系 与 数学 分 析 中 的 函数 关 
系 不 是 一 回 事 , 但 是 ， 当 我 们 考虑 在 给 定 4 之 值 的 条 人 忻 下 , 变 景 了 
的 均值 瑟 (P| 习 时 ， 则 这 个 量 假 定 完 全 由 2“ 决定， 在 本 例 中 ， 避 
(Ys) 可 理解 为 在 相当 大 的 面积 上 每 亩 施肥 量 为 时 的 商 平均 产 
量 ， 至 于 吾 (Y | 芭 与 2 的 关系 的 其 体 形式 局 (Y|2) 一 4a+82， 可 以 
是 根据 某 种 理论 分 析 耐 得， 可 以 是 过 去 对 这 种 现象 观察 结果 的 一 
个 经 验 上 的 总 结 , 也 可 以 单纯 就 是 一 种 数学 上 的 简化 假定 .在 这 
里 就 触及 所 谓 模 型 选择 的 问题 ， 就 是 指 选择 怎样 的 范 数 作为 召 


二 半 宇 站 


人 一 ve 由 ice ma oa in au、 


Clg). 在 某 些 精 确 的 自然 科学 领域 (主要 是 物理 学 ) 中 有 时 理 
论 上 的 研究 能 确定 这 种 函数 的 形状 ， 在 应 用 科学 中 ， 则 往往 要 结 
合 经 验 来 决定 ， 总 之 , 可 以 说 这 其 本 上 不 是 一 个 数学 问题 , 然而 ， 
统计 学 的 方法 能 才 助 我 们 根据 实验 资料 选 定 这 个 关系 的 形式 ， 以 
及 检验 茶 种 选 定 的 形式 与 实际 数据 是 否 有 良好 的 符合 等 。 从 理论 
的 观点 看 ,一 经 选 定 了 一 种 形式 , 往 后 的 问题 就 是 在 它 的 基础 土 来 
斌 究 种 种 有 关 前 问题 、 

其 次 ， 在 本 问题 中 ，z 和 了 这 两 个 变量 明显 地 具有 “原因 ” 
《Cause) 利 “结果 ”(Effeot 的 性 质 ， 因 此 可 以 把 它们 分 别称 为 月 变 
其 (Independent Yariable) 和 因 变 量 (Dependent Variable). 在 
另 一 坚 问 题 中 ， 这 种 因果 关系 并 不 明显 或 根本 不 存在 ， 但 为 方便 
计 ， 仍 不 妨 使 用 自 变 量 和 因 变 量 的 名 词 ， 在 统计 意义 上 重要 之 点 
有 盟 : 自 变量 w 不 认为 是 随机 的 ， 而 因 变 量 了 则 认为 是 随机 的 因 
变量 了 的 均值 是 # 的 函数 ， 

最 后 , 拿 本 俩 的 情况 说 , 影响 了 的 因素 ,显然 不 止 2 一 个 , 其 
余 象 使 用 的 种 子 品 种 和 和 每 亩 插 种 量 ， 生 长 季节 的 平均 气温 ， 耕 作 
万 陈 ， 等 等 ， 还 有 其 它 一 大 批 可 控制 和 难于 以 至 不 可 控制 的 因 
素 ， 正 是 这 大 量 固 素 的 存在 使 得 z 之 值 不 能 难 一 地 决定 了 ， 在 本 
例 中 , 我 们 单 挑 出 “与 了 的 关系 来 研究 ， 这 意味 着 其 它 一 些 重 要 
的 可 控制 因素 (如 上 文 提 到 的 品种 与 每 凋 播 种 量 之 类 ) 已 固定 在 适 
当 水 平 上 上， 其 它 大 量 不 可 控制 (或 未 加 控制 的 因素 则 作为 随机 因 
素来 看 待 , 因此 , 作为 随机 变量 的 了, 它 的 值 由 两 部 分 之 和 组 成 

了 一 & 十 Br 十 e (6.1.2) 
(一 般 地 , 是 了 = 五 Y 1) 十), 第 二 部 分 ， 邯 6, 表示 一 切 随 机 因素 
对 了 的 效果 的 总 和 ， 第 一 部 分 8 十 如 或 一 般 地 吾 (Y'| 区 ,表示 自 
变量 * 对 了 的 平均 效应 。 这 个 函 教 
y 一 4 十 bwm( 或 一 般 地 ,y= 亡 (Y |%)) 
称 为 回归 函数 “(Regression 如 netion) ,模型 三.1.2) 显示 了 本 问题 
1) 这 是 就 我 们 将 要 定义 的 那 种 线 性 模型 而 言 。 在 实际 问题 中 自 变 量 是 陆 宙 变 弘 
的 情况 并 不 少见 ,在 理论 上 当 热 孔 可 以 研究 自 奕 量 也 是 随机 变量 的 模型 . 
4d0。 ， 


的 统计 性 质 . 
在 本 间 题 中 , 晶 则 回归 函数 的 一 般 形状 已 假定 是 线性 的 , 但 其 
中 的 系数 mw 5 一 般 是 未 知 , 它们 以 及 随机 变量 。 中 可 能 出 现 的 其 
它 未 知 数 ， 都 称 为 模型 的 参数 .关于 模型 6.1.2) 的 统计 问题 , 就 
旦 指 关 于 这 些 参 数 的 统计 间 题 、 例如， 估计 色 五 之 值 ， 检验 5 是 
否 为 避 等 等 . 
以 上 对 一 个 自 变量 和 最 简单 的 模型 y 一 a 十 Bx 所 说 的 一 切 , 自 
然 地 可 推 到 任意 多 个 自 变量 及 更 复杂 的 回归 画 数 的 情 说， 比方 
说 , 在 本 例 中 可 以 研究 每 调 施 肥 量 21， 每 亩 播种 量 mm 及 每 亩 产量 
了 的 关系 .在 此 mm， 加 为 自 变 量 而 了 为 因 变 量 , 关于 回归 函数 的 
形状 , 可 设 为 
EN = EB(Y|s, 23) 一 和 十 Bi 二 ety 
或 
Br) =- EY la, 2 
一 妈 十 2 t om t drt ens foto .1. 
等 等 、 昌 则 问题 比 以 前 复杂 化 了 , 但 百 ( 了 7) 的 含义 ， 及 将 了 分解 


为 A 
VY- EI(Y|s, wa) +e 


这 样 的 结构 的 思想 , 与 以 前 赂 无 差异 . 
推 而 广 之 , 在 最 一 般 的 情况 下 , 考虑 天 个 自 变 量 ww，…，w 和 
因 变 量 了 2， 假定 加 (了 了) 与 “1, …, mi 之 间 存 在 着 如 下 的 联系 ; 
BEI = BY lm 一 1, wo By, ,Bo), (5.1.4) 
这 里 函数 了 的 形状 已 知 , 但 其 中 的 参数 B，…, By 未 知 , 这 是 最 一 
般 的 回归 模型. | 
在 本 童 中 ,我们 考虑 全 .4. 包 的 一 个 重要 的 特殊 情况 , 即 站 有 


Fo “1 wo Ba 0 By) = Bf 0) 61.5) 
的 形状 、 这 里 所, …, 户 都 是 自 变 量 wm。 …, 办 的 已 知 函 数 ， 这 
时 称 回 归 模 型 (6.1. 信 为 线性 的 在 此 我 们 着 重 指出 一 点 ; 回归 模 


如 自然 ; 在 一 个 向 题 中 庄 考 虚 的 因 变 量 可 以 不 止 一 个 。 这 属于 多 元 分 析 的 范围 ， 
本 章 邓 加 考虑 。 “ 


全 


型 的 线性 是 指 对 参数 局 . …, 局 而 言 ， 例如， 就 全 .1. 呈 而 言 ， 显 
狼 有 二 .1 .多 的 形式 , 其 中 尼 =2, p=~6, 而 
Bi=a, B=b, Ba=o, Bi=a, Bs=e, Be=f, 
fr=1, fo—m, fe = my, 太一 喧 ， = fe = Zs, 
作为 mvs 的 函数 , (65.I .中 蚌 二 次 多 项 式 而 非 线 性 的 . 
参数 三 ,，…， 的 慎 未 知 ， 为 了 对 它 人 进行 需 计 或 研究 其 它 
与 之 有 关 的 推断 问题 , 需要 进行 试验 ， 设 一 共 作 了 sw 次 试验 , 在 第 
4 次 试验 中 ， 自 变量 名 ，…， my 分 别 取 值 ds …， 鸣 :而 再 变量 了 
取 值 为 了 ,， 假 定 候 . 工 ,四 成 立 , 则 有 


籽 
P= Bifsten, 1 a $=1, RB.1.6) 


关于 扩 ,-…, 中， 在 此 着 重 注意 的 是 它们 都 是 已 知 数 ， 不 带 任何 
随机 性， 在 实际 问题 中 , 它们 的 值 有 时 可 根据 我 们 的 需要 来 选 定 . 
前 述 施 肥 量 和 播种 量 , 就 属于 这 种 情形 ， 这 时 , 我 们 可 以 谈 到 试验 
的 设计 ， 即 考虑 怎样 选择 这 些 值 去 作 试 验 ， 以 有 利于 我 们 的 目的 
《对 未 知 参 数 进行 估计 等 等 。 但 在 许多 情况 下 ， 自 变量 之 信和 不 一 
定 可 以 随心 所 和 谷地 选择 ， 例 如 车 把 “生长 季节 的 平均 气温 ”这 个 变 
萤 加 加 入 问题 的 考虑 中 , 出 se 并 不 能 根据 试验 者 的 要 求 选 定 , 它 
们 只 是 一 条 观察 结果 . 往 后 我 们 不 考虑 这 种 差别 ， 而 总 是 抓 住 
“wy 为 已 知 的 不 带 任 何 随机 性 的 常数 ”这 个 要 点 ， 自 然 ， 从 实用 的 
角度 说 , 这 个 益 别 往往 有 着 重要 的 意义 , 甚至 召 (F 1%) 这 个 函数 的 
角 赤 , 也 可 以 与 自 变量 之 值 能 否 由 试验 者 控制 有 关 . 

， 既 挫 zu 都 是 已 知 数 ， ww， …，zim) 也 已 知 , 因此 , 不 妨 引 进 
一 个 新 记号 

wns os a) Gl, eH, $1 ,DP) 

代替 它 , 而 将 (5.1. 介 写 为 


PanBrre Es (6.1.7) 


的 形式 . 
根据 我 们 前 面 所作 的 分 析 , 在 人 5.1-7) 中 ，a% 是 在 第 6 次 试验 


+ d+， 


i ma 


中 , 种 种 未 加 控制 及 不 可 控制 的 随机 因素 对 因 变 量 了 之 值 的 影响 
的 总 和 , 因此 它们 是 随机 变量 。 模 型 6.1. 站 的 概率 性 质 , 就 取决 
于 这 些 a, 即 随机 向 量 8 一 (wy,，…-, em)' 的 概率 性 质 ， 报 据 回 归 函 
数 的 定 驻 , 自然 地 有 
吾 (@) ~=0， 妈 六 (61) 一 … 一 站 (es 一 0 5.1.8) 

在 本 章 中 总 假定 这 一 条 成 立 , 没有 例外 . 至于 其 它 进一步 的 候 定 ， 
则 痢 问 题 的 需要 年 定 , 下 面 列 出 丙种 最 常见 的 : 

(A) VAR =o,. 
这 里 0<o?<oo, q!， 未 知 ( 因 而 是 模型 中 的 参数 )， 而 工 .为 n 阶 单 
位 阵 . 

(BB) e~NO, PD, O09 oo0, ?未知 ， 
其 它 假 定 在 需要 时 再 引进 . 

为 了 简化 写法 , 常 使 用 乱 阵 记号 将 个 ,1. 站 写 为 


YF~ XB+e, (5.1.9) 
此 处 
y, En Fx 
"| : 至 二 玉芝 a 
I 人 In 人 


Bi Ei 
-| : ) -| : (5.1.10) 
B, Cs 


在 前 面 ,， 于， e 这 两 个 记号 曾 在 别 的 意义 上 使 用 过 ,以 后 总 在 
民 .1.10) 的 意义 上 来 理解 . 
我 们 将 以 上 的 讨论 总 结 为 
定义 5.2.2. 任 一 个 形 如 
F— 48+eé, 
je 一 个 ， (5.1.11) 
对 8 移 其 它 某 种 假定 
的 结构 称 为 一 个 线性 模型 。 了,， 星 ，B, 6 的 意义 如 由 .1.10); 坚 是 


P| 


已 知 蕴 自 变 量 试 双 《或 观察 ) 值 组 成 的 矩阵 ， 常 称 为 设计 竹 阵 
(Design matrix).。 了 轩 为 因 变 量 的 试验 {或 观察 ) 值 组 成 的 向 量 ， 
一 (81，-…，Be)'，B:,，…， Be 都 是 未 知 参 数 , 常 称 为 回归 系数 .而 
e 为 随机 向 草 ， 有 时 称 为 随机 误差 向 量 ， 所谓" 对 * 的 其 它 某 种 假 
定 ” 是 指 根据 问题 需要 南 对 e 的 性 质 施加 的 一 种 假定 ， 如 前 疝 提 
到 的 令 ) 和 (BB 之 类 ， 

这 是 一 人 极为 重要 的 统计 模 弄 。 它 之 所 以 重要 ， 在 于 许多 重 
要 的 应 用 统计 分 支 , 如 回归 分 析 和 方差 分 析 , 其 理论 模型 都 可 以 包 
罗 在 线性 模型 的 钵 系 中 ， 册 于 这 个 原因 ， 关 于 这 种 模型 的 理论 各 
应 用 , 在 文献 中 有 了 很 多 的 研究 . 要 全 面 地 叙述 与 这 个 模型 有 关 的 
内 容 , 包括 上 面 提 到 的 儿 个 统计 分 支 , 需要 写 儿 卷 大 部 头 的 著作 . 
作为 以 毅 述 数理 统计 的 理论 基础 为 且 标 的 本 书 , 无 论 从 性 质 上 , 篇 
幅 上 都 不 容许 这 样 做 、 我 们 将 把 重点 放 在 关于 这 模 迎 的 一 般 理论 
上 , 而 不 去 深入 其 在 一 些 具体 形态 下 的 细节 .比方 说 , 关于 回归 分 
斩 和 方差 分 析 这 两 个 分 支 的 细节 , 本 章 不 加 深入 探究 , 但 为 了 理解 
这 两 个 分 支 所 舌 的 线性 模型 理论 基础 方面 的 问题 ， 则 将 作 较 深入 . 
的 讨论 读者 在 掌握 了 这 些 内 雁 后 ， 再 进而 学 可以 这 个 模型 为 基 
础 的 统计 分 支 时 , 就 具备 了 必要 的 基础 . 

项 恒 提 到 一 点 , 本 章 中 将 较 多 地 使 用 矩阵 、 二 次 型 . 线性 空间 
等 工具 ， 涉 及 的 内 容 , 除了 可 能 有 个 别 细节 上 的 例外 , 都 在 大 学 数 
学 系 线性 代数 一 课 的 范围 之 肉 。 具体 地 说 , 不 超出 参考 文献 [0] 
第 一 章 的 范围 . 对 这 方面 准备 不 足 的 读 考 ， 我 建议 他 们 精读 这 一 
章 ( 包 括 演算 其 中 的 习题 )， 至 干 本 童 中 需要 的 少数 关于 和 矩 降 广义 
道 的 知识 , 将 在 本 章 附录 中 给 出 . 


$ 5.2， 最 小 二 乘 估计 


假定 有 线性 模型 (65.1.11)、， 我 们 假定 e 满足 条 件 (4)， 即 
VAR(e) 一 o*1ls， 本 节 我 们 讨论 有 关 户 和 02 的 信 计 问题 ， 
我 们 先 提 到 一 点 有 用 的 事实 ， 即 线性 模型 的 几何 描述 ， 根据 


8 过 


06.1.11D)， 有 如 ( 了 了 ) 一 下 B8， 故 车 以 A( 征 ) 记 由 于 的 列 向 量 (并 
个 ) 所 张 成 的 线性 子 空间 ， 则 (了) 一 下 8 等 价 于 及 (YF) E 
-人 (人 )。， 这 个 子 空间 的 维 数 , 就 是 +~dim (NM( 玉 )) =rE( 玉 )， 当 
然 , 有 "<p， 若 +=p, 则 线性 模型 称 为 满 秩 的 . 否则 称 为 降 秩 的 . 
因此 ， 从 几何 上 说 ， 线 性 模型 的 意义 在 于 把 本 来 是 % 维 的 (YF) 
约束 在 一 个 不 超过 Pp 维 的 子 空间 内 . 


(一 ) 及 的 最 小 二 乘 估 计 (Least Squares Retimate, 简称 为 LS 
估计 )， 
定义 上 5.2.1， 设 有 线性 模型 (5.1.11)， 若 户 = 语 (了) 为 了 的 
线性 函数 , 满足 条 件 。 
YXBl:~min| Y— X81, (5.2.1) 


则 称 司 为 局 的 一 个 LS 估计 

这 个 重要 的 倘 计 方法 的 根源 可 追溯 到 Laplace (1806) 和 Gausg 
(1809), 上 世纪 末 Markov 作 了 重要 的 工作 , 这 些 工作 奠定 了 这 方 
法 的 基础 ， 本 世纪 以 来 , 一 些 学 者 对 之 作 了 进一步 的 发 展 . 

LS 估计 的 直观 意义 是 很 清楚 的 , 车 B 的 真实 值 为 如 则 在 第 
次 试验 中 , 了 的 观察 值 二 与 其 均值 25( 时 处 0 一 (oa oa) 
的 差异 为 了 一 2 6 一 1，…, mw， 其 平方 和 为 

Pe dA ep. 
既然 不 知道 5， 自 然 的 想法 是 选取 名 的 估计 值 为 启 使 之 满足 
(5.2.D. 

从 几何 的 语言 说 ,车 以 全 记 了 了 在 MAC 于) 内 的 投影 , 则 LS 估 
计 的 意义 在 于 : 选取 启 使 于 6= 邓 ， 这 使 LS 估计 有 另 一 种 解释 ,， 
设 我 们 要 估计 的 是 五 (了 ) = 于 8B， 我 们 已 知 吾 (了 ) ENCX), 但 
实地 观察 到 的 了 不必 在 .b( 亚 ) 内 .为 了 由 卫 估 计 加 (FY), 自然 
的 想法 是 在 -Li( 开 ) 内 找 一 个 企 ， 使 了 一 他 |* 尽 可 能 小 , 而 这 只 在 
全 一 下 有 为 了 了 在 (下) 内 的 投影 时 才 达 到 .这 个 分 析 也 提示 了 
LS 估计 的 存在 性 , 因为 解 然 全 EL( 卫 ), 至 少 存在 一 个 万 致 了 全 


s 址 4 


他, 而 且 显 然 ， 当 线性 模型 为 满 秩 ( 即 应 (五) = 用 时 , 这样 的 店 
是 唯一 的 . 
一 般 , 为 了 求 出 满足 汕 .2. 卫 的 局 可 以 用 通常 求 多 元 函数 极 
值 的 方法 ， 记 百 = (54，…， Bo) 及 
QO = | Fb- | Fl 2F' Tb-tbSD, 


其 中 
局 一 下 "三 . (后 .2. 人 7 
导出 方程 组 -如 一 0 ~ 二 …。 pp 不 难看 到 它 有 下 面 的 形状 
Sb= 工 'Y, 5.2.0 
这 个 方程 组 叫 正则 方程 组 


定理 考 -2.1. 1° 正则 方程 组 全 .2.8) 必 有 解 ，2° 正则 方程 组 
的 任 一 解 店 满足 性 .2. 雹 ，8° 满足 6.2.1) 的 任何 启 必 为 正则 方 
程 组 的 解 . 

证 ,1° 由 周知 前 事实 .《 (于 /不 ) = .NA (了 )， 知 玉 'YE.A 
(9), 因而 Tk(S1 于 ' 了 ) =rk(9S). 由 线性 方程 组 的 理论 知 伍 .2.9 
有 和 解 ， 取 及 的 尾 一 广义 道 尽 , 解 可 表 为 

BA-S-¥'Y. (5.2.0 

故 必 为 了 的 线性 函数 ， 熟 悉 广 义 逆 的 基本 事实 的 读者 不 难 直 接 

验证 ; 由 局 .3. 当 确定 的 及 满足 个 .3.3 ， 利 用 一 般 公 式 ( 见 本 章 附 
录 ( 外 式 ) 

(这 ' 卫 ) (下 下) 下 一 大， (5.2. 的 

2° 设 店 为 (6.2.9) 的 一 解 ， 则 对 任何 台 

1¥- X61 (7— XB +B-D) | 

-1Y— X81 + BD'SE-D 
十 2( 诬 一 国 ' 玉 "(了 一 完 馈 ， (5.2.60) 
出 育 为 (6.2.8) 的 解 知 上 式 右 边 第 三 项 为 0， 再 注意 到 B 为 半 正 
定 (以 后 记 为 号 >0， 若 号 为 正定 ， 则 记 为 号 > 目 ， 由 (5,3.6) 得 
1 一 证 B83?>1 了 了 一斑 让 |?, 由 避 的 任意 性 知 训 为 极 信 问 题 作 .2.1) 
的 解 . 


二 中 


an 


3° 反 过 来 , 若 记 满足 全 .3.1 而 府 为 垣 .2.8) 的 任 一 解 ( 府 的 
存在 已 在 1? 中 证 明 ). 在 (6.2.6) 中 令 6=B8, 得 i 了 一 X81:>|Y 
一 至 府 |*” 等 号 当 且 仅 当 

(BE-B'SB-A- HB-AXIEB-A 
-XE-ABl=0 
时 成 立 , 由 于 所 满足 (6.2.DD, 由 | 了 一 XB1">>i 了 一 秘 记 |? 知 等 号 
必 成 立 ， 故 上 有 | 瑟 ( 府 一 内 上 生 一 0， 因 市 玉 B 一 玉 户 ， 故 由 让 满足 
(5.2. 台 知 
SB X'HA- ERE- SER!'Y 
即 硝 满足 后 .2.3), 定理 证 上 毕 . 

这 个 定 刺 建立 了 极 值 问题 恒 .3.1) 的 解 与 正则 方程 组 俐 .3.3) 
的 解 的 一 致 性 ， 由 此 得 出 下 面 的 重要 推论 ， 

系 5.8.1 若 孙 (于 ) =p, 则 的 18 信 计 唯一 且 由 公式 


AB-S-1X'Y (5.2.7) 

给 出 , 这 时 _ 
EBB)=B, (5.2.8 

即 记 为 户 的 无 偏 信 计生 
VARCB) = 81, (5.2.9) 


”证 ， 由 zkF( 于 ) =p 知 TE(9) 一 IE( 下 ) 一 D， 即 驴 为 满 秩 的 , 因 
此 正则 方程 组 化 .3. 的 具有 唯一 解 全 .2. 人 .根据 定理 5.2.1， 这 
个 解 就 是 8 的 玲 一 的 I 估计 利用 了 =XB+e 知 =S-1X', 
(XB+e) =B+S:¥’e, 然后 由 召 (e) 一 0 得 出 6.2.8), 又 

VARCGB) ~ VAR(S-!X'e) — S11X'VAR(e) (S-1EN)! 
—S-1X'oT TS- oN-1H'ESI-! 
一 上 三 于 司马 -一 G2 肌 -1 
注 . 车 娘 ( 有 至) < 为 则 悟 .32.8 的 解 ， 因 而 所 的 1 估计 , 不 是 
唯一 的 ， 在 如 的 一 切 LS 估计 中 , 以 由 公式 
B+=S+'F= 人 +Y (6B.2.10) 
决定 者 其 长 度 最 小 ， 这 里 和 + 表 几 的 Moore-Penrose 广义 道 。 这 
个 事实 的 证 明 留 给 读者 . 


《一 ) 可 估计 函数 (CEstimable fanction) 及 其 Gauss-Markov 
估计 . 

定义 省.8.2 设 c 轨 为 有 的 任 一 线性 函数 fo 已 知 )， 若 存在 

有 之 一 线性 无 偏 佑 计 @@ 素 邵 
再 (ge 了 = 局， 
则 称 c'8 为 可 周 计 函 教 2. 

估 系 5.2.1 立即 得 出 ， 当 区 ( 吾 ) =p 时, 任何 8: 都 可 和 估计 ， 
事实 上 , 由 于 忆 的 LS 估计 户 为 的 无 偏 告 计 , 故 c'~e'S-+ 
为 e'8 的 一 个 线性 元 偏 估计 ， 当 让 ( 宫 ) <<p 了 时， 如 我 们 以 下 将 看 
到 的 ， 并 非 一 切 08 都 可 知 计 。 一 个 函数 是 否 可 和 舍 ， 有 其 实际 含 
尽 ， 比方 说 , 当 下 (下 ) <p 时 ， 可 以 找到 两 个 不 同 的 8 和 8% 
致 肝 8 中 ~ 下 8%， 放 当 忆 ~=B 中 和 .8B 外 时 ， 加 (了 是 一 样 的 ， 这 
说 明 : 由 了 不 能 对 及 作出 任何 有 实际 意义 的 推断 , 或 者 说 , 6B 本 身 
在 这 个 模型 (5.1.11) 中 是 元 法 异 清 楚 的 ， 用 定义 5.2.3 的 术语 
说 , 至 少 存在 6 的 一 个 分 量 B, 它 不 是 可 和 估 的 . 

下 面 的 例子 更 形 象 地 说 明 可 信和 函数 的 含义 ， 设 有 两 个 物体 ， 
其 重量 Bi，Bs 未 知 。 把 它们 同时 放 在 天 平 上 称 5 次 ,第 次 结果 
为 二。 则 模型 为 

了 了 一 站 十 启 十 ep bt—1, -名 
此 处 a 为 第 次 称 量 的 误差 .假定 BO) 一 0, (8 一 (6 …, 0))， 
VAR (Ce) =o2F. 
在 本 例 中 , 局 +Bs 是 可 估计 前 ， 例 如 Fa: 就 是 其 一 无 仿 估 计 ， 


但 记 及 fs 都 不 可 入 计 ， 实际 上 ,车 遍 oF' 为 肥 的 无 偏 舍 计 ， 则 | 
(家 民 )- 视 o8 + 次 ap， 
要 此 式 成 为 恒等式 ,必须 训 c1=1 高 o=0， 这 显然 是 不 可 能 的 . 


1 通常 , 称 一 函数 可 佑 , 车 存在 其 无 偏 佑 计 (不 必 为 线性 的 ) ,容易 证 明 , 就 线性 
模型 而 言 , 此 处 定义 等 价 于 通常 定义 ， 请 读者 自 证 之 。 


和 


此 处 记 (及 By) 之 不 可 个 的 理由 很 清楚 ， 因 为 每 次 称 量 都 基 
两 个 物体 同时 称 ， 自 无 法 由 所 得 结果 对 其 中 单独 一 个 物体 之 重量 
作 任 何 估计 ， 

定理 已 .2.23. 下 面 三 条 是 等 价 的 ， 

TI” ce'B8 可 佑 ， 

2° EB- HH cc" 

8° me 人 (站 

证 ，1"=32°, 堵 5'8 可 估 , 则 对 某 个 4 有 

cB—E(ae YT -axe,. 
于 是 立即 得 到 2°， 

23 一 3 ， 设 3 成立 而 8° 不成立 . 将 器 分解 为 e 一 要 十 看， 其 
中 aEACNTm BILAN), x0 则 0= 了 5 一 了 0, 但 0-c0 
头 宇 一 后 们 这 与 2° 了 矛盾. 

38° 坟 31°; 车 8° 成立, 则 € 一 下 对 某 个 0 教 CB8 一 a' 玉 8B, 这 
时 wr' 子 为 c'B 的 无 偏 居 计 ， 定 理 证 毕 . 

这 个 定理 证 明了 可 居 性 的 几 个 等 价 条 件 、 其 中 以 1*S3° 最 
重要 . 由 3° 与 可 佑 性 等 价 知 ,一切 ce'B8 可 估 的 充 要 条 件 为 X( 至 》 
一 DB， 事实 上 ， 由 1633° 知 一 切 c'B8 可 居 的 充 要 条 件 为 .A (Xn 
等 于 整个 和 维 身 量 空间 这 个 当 且 人 奴 当 站 (下 ) = 时 才 成 立 . 

由 可 信 性 的 定义 立即 得 出 ， 车 c1B, =I，…, 和 沉 汐 可 情 ， 
而 ws …， 呈 为 常数 , 则 襄 asciB) 为 可 全 函数 , 即 可 信函 数 的 任 
何 线性 组 合 仍 为 可 佑 . 

设 0'8 为 一 可 悄 丁 数 。 经 然 c'8 的 线性 无 偏 佑 计 存 在 ， 我 们 
自然 地 提出 问题 : 在 ce'B8 的 一 切线 性 无 偏 悟 计 中 , 找 出 其 方差 最 小 
的 那 一 个 、 这样 的 估计 叫 e' 有 8 的 Gaoss-Markovy 俩 计 (简称 GM 
估计 )， 在 文献 中 也 常 称 为 最 优 线性 无 偏 估计 (Best Linear Unbi- 
aied Estimate, 简称 为 BLUD) 

下 面 的 定理 在 最 小 二 乘法 中 有 模 本 的 重要 性 . 

定理 点.2.3(Glanss-Markov)， 若 e 有 可 估 ， 则 e! 认 是 其 唯一 


. eT ET 


的 GM 估计 , 此 处 研 为 尽 的 任 一 I8 估计 ， 

证 ， 首 先 证 明 ， 著 ec'8 可 估 ， 则 其 GM 估计 存在 唯一 事实 
上 , 由 于 c' 扫 可 估 , 必 存 在 其 一 -线性 无 偏 估计 wr 了 将 9 分解 为 

a=b+d, BEA(R), dd LH), 
则 由 五 (了 ) = 于 B08 一 0, 知 BW 了 了 也 是 ce'B 的 无 偏 估计 ， 不 
难看 出 , 这 样 的 8 只 有 一 个 , 即 ; 
{mE.N( 玉 )， tH' 了 为 C1B 的 无 偏 估计 }=>m 一 纪 . 
事实 上 F， 有 0= 了 [9 了 -sv 了] = 起 一 me) 了 B 对 任何 B， 故 十 一 
17D)' 于 0， 即 5 一 me 上 .AN(T)， 但 6 和 sm 都 属于 .HK( 于 )， 因 而 
6-mE.N( 玉 )， 这 样 得 到 台 一 4m 一 0， 现 在 不 难看 出 BW 了 为 c'8 
的 唯一 的 GM 估计 ., 事实 上 , 设 避 卫 为 有 的 任 一 线性 无 偏 估计 ， 
及 ¥b， 则 如 上 所 证 ， 上 月 EE.H(T), 衣 在 .AM( 玉 ) 内 的 投影 为 5。， 因 
此 | 真有 |, 而 
Var(h' YF) =o|h|: > ob I?=— Vartd' TY), 

这 证 明了 5 了 确 为 唯一 的 GM 估计 . 

其 次 , 我 们 来 证 明 

6 Y=e'B. 
这 里 应 为 有 8 的 任 一 LIB 估计 .为 此 注意 ， 由 ep 可 估 , 知 CE. 即 
《下 ( 见 定理 后 .3. 信 ,又 因 . 帮 (下 站 =.( 焉 ' 焉 )， 知 CE-( 避 在 )， 
因而 存在 向 量 和, 致 c 一斑 ' 素 NW， 易 见 力 一 于, 事实 上 ,由 了 B' 了 ) 
= 记得 四 忆 生 ' 卫 导 对 一 切记 放 加 玉 一 和 下 ' 瑟 ， 即 中 一 
及 和 站 一 0 因而 5 一 了 上 ACA)Y， 但 BEHA(OXT)， 故 一 下 和 EE 
-MH( 玉 ), 从 而 下 一 到 一 0， 现 设 启 为 忆 任 一 LB 合计, 则 由 正则 方 
程 蛋 /五 记 = 至 ' 了 了 , 放 
BY=NM EY RTA-eB 

这 完成 了 定理 前 延明. 

系 间 .2. 久 .车 0， 5 一 1，-…,， 上 都 可 信 而 j=l ,上 上 


分 别 为 其 GM 估计 , 而 ma，…, oy 为 常数 , 则 让 (oe; 有) 的 GM 估计 
为 襄 ad 了 . 


nD) 


mm 


注 。 在 定理 证 明 中 我 们 看 到 ， 著 c' 扩 可 估 ， 则 c' 捅 不 依赖 于 
旭 的 LS 估计 有 户 的 取 法 , 故 可 定义 cB 的 LS 佑 计 为 e' 有 ， 这 时 定 
理 5.2.8 可 写 为 。 可 估 函 数 的 GM 估计 与 其 LS 估计 一 致 ， 信 得 
注意 的 是 ; 这 个 一 致 性 是 在 e 活 合 条 件 (&a) 之 下 证 明 的 (参看 本 节 
《 恩 )》. ， 
定理 5.2.8 断言 ， 可 居 薄 数 cB8 的 LS 估计 ec 应 在 一 切线 性 
的 无 偏 估 守 中 是 方差 最 小 的 ， 因 此 , 这 定理 没有 排斥 这 种 可 能 性 ， 
即 存在 方差 比 ec' 训 的 方差 更 小 的 非 线性 无 彤 估计 .但 是 , 如 困 进 
一 步 假定 e 满足 条 件 (B), 则 这 种 可 能 性 不 存在 . 
定理 区 .2.4. 车 e~ 术 0, 1，c:B 为 任 一 可 居 函 数 , 应 为 
户 的 18 估 计 , 则 ce' 站 为 ci8 的 MVUE. 
证 ， 册 假定 知 也有 效 度 函数 


(V 3x0) "oxp[ -wr|Y- X81 ] 
= (V Bro) -exp (OTT) + ta To 到 ))， 


1 1 
其 中 ee 9.— Fs, = 人 2 二 1 


TAP) -DY TA) -DoT i-l, , . 
这 是 一 个 指数 族 , 其 参数 空间 
a. 本 后 ) Oo 00, 


1 1 
e-{( py 
copB<eo, $=—1, .., 外 


有 内 点 ， 依 定理 1.6.1 下 = (P34 …， 了 D541) 为 完全 充分 统计 量 . 
车 exp 可 估 , 其 GM 估计 为 
ee'S- HR'YF= eS (T,, ,Ti , 
为 于 的 际 数 ， 故 依 定理 2.1.1, ce' 站 是 c'8 的 唯一 的 MVUE， 定 
理 证 毕 . | 
容易 举 反 例证 明 ; 若 8 不 服从 正 寒 分 布 , 则 ce' 朋 的 GM 估计 不 
必 是 MVU 马 我 们 把 构造 这 个 容易 的 反例 的 任务 留 给 读者 . 


4 ， 


本 


《三 ) er: 的 估计 
设 衣 为 8 的 任 一 LS 估计 , 则 互 房 与 房 的 选择 无 关 且 就 是 卫 
在 .在 (了 于) 内 的 投影 ， 所 以 , 若 且 Px 记 往 -人 二) 内 的 投影 恋 换 的 
矩阵 , 则 将 有 
PT—= XA- TS-X'Y. 
这 里 尽 - 为 沪 = 于 至 的 任 一 广义 逆 。 由 此 可 知 ，Px 一 于 SS- 耶 ' 而 
后 者 与 S- 的 选择 无 关 ， 记 
E= 8, = YT—PrT- (RS-XN)P, (65.2.11) 
ta …， 和 称 为 残 差 (Residual) ， 分析 2，…， 甸 有 时 能 帮助 我 们 
了 解 模型 (6 .1.1D) 与 实际 数据 的 符合 是 不 是 好 ， 这 称 为 所 谓 残 差 
分 析 (Besidual Amalygis) ， 
这 里 我 们 不 涉及 有 关 残 闫 分 析 的 问题 , 而 只 指出 : 利用 残 差 可 
得 到 误差 方差 的 一 个 无 仿 佑 计 ， 为 此 , 在 个 ,2.1 了 D 中 以 + 代 
S-, 并 注意 到 . 
(TL,— I+ ENT EIS+H) 
=D,— AAS+A"N (ESA 
~ —2FS+Y'+AS+SIS+Y'— 1 XS+¥', (5.9.12) 
以 及 至 S- 环 ' 与 S- 的 选择 无 关 的 事实 , 得 
1812 = Y' (T,XS-X") Y, (5.2.18) 


为 了 计算 如 | 人 加, 需要 下 而 的 引 理 ， 
引 理 占 .2.1. 设 了 为 % 维 随机 向 量 ,， 了 BC 了) =6= (6 …， 
50)'， VARCT) 一 o2 了 ,而 和 4 为 % 阶 常数 方 阵 , 出 
ELCFY'AY) =b'Ab-- otr(tAd), 
证 ， 出 假定 知 BYFD 2 十 G6 故 


BY'AT) -之 Gu (beds + 08,) 
~ bt Db Ab+orr A). 


粕 此 引 理 用 于 (5.2.13)， 注 意 由 全 .2.12) 知 上 一 于 与 + 至 ' 为 震 等 
直 二 沁 和 


阵 , 向 乔 等 阵 的 迹 等 于 其 秩 , 得 “ 
再 (| 全 | = PB'X'(T,— FS-XN) AB+ otr(T,.— XS-¥N 
on—rk(CES- 有 NY) 
为 了 计算 rk( 于 5S- 下 ,注意 芝 S- 玉 ' 一 Px, 而 后 者 的 秩 显 热 就 是 
dim{_N (及 )) 一 rk( 下 ,有 
E(élD = —7), r=rk(T). (6.2.14) 
这 样 我 们 得 到 
定理 .2.5， 记 7+= 了 (于 ), 出 
1 A 1 Br wr 
= el TIA Y) (5.2.15) 
为 的 一 个 无 偏 枯 计 . 车 e~ 玉 O@, o 史 9, 央 全 为 吕 的 MVUE. 
证 ， 4 的 无 偏 性 由 外 .2.1 信 得 出 。 君 .15) 的 第 二 式 由 1 了 一 
EE Yl 2 Yr BSS oY — 28'¥'Y+ BX'Y = 
上 Yt? 一 名 下 ' 了 得 出 (此 处 用 了 关系 式 5 户 = 蛋 ' 了 ) ， 这 个 形式 在 
计算 上 有 其 方便 , 因为 在 解 正则 方程 组 时 已 算出 过 在 " 王 ， 定 理 的 
后 一 结论 与 定 瑶 5.2.4 的 证 明 相 似 . 因 为 在 那里 的 记号 下 , 癌 是 
也 的 函 教 . 


本 段 证 明 下 面 的 重要 定理 ， 

定理 十 ,2.6. 设 e~N 0, oz)， 则 

1° 名 一 站 02j/ea 一 | 看 7 人 一 zKC 
1 


2° #0-() 8 是 可 佑 函数 ， 1， cB 为 CB 
站 


的 GM 佑 计 , 则 CBA~N(Cp8, oCS+C"); 
3° 0 让 与 分 独立 . 
证 ，4° 在 二 .3.13) 中 以 T= 下 B+ 代入 并 注意 
(EL,— EI-TN) TS-S—0, 
知 从 J?/os 一 (上 (一 8S- 玉 )(4)， 由 于 电 ~ 娘 (0, 了)， 由 


#2 


$1.1, 和 娄 分 布 的 性 质 可 立 得 1". 

2° CK 的 正 态 性 由 C=-CS+ 卫 ! 了 了 及 了 的 正 态 性 得 出 ， 由 
C 启 的 无 偏 竹 知 (CA 一 CB, 而 

VARCA = VARCS+H' TY) 
oOS+E'S+C' -oO0S+O' 

这 证 明了 2"， 

3° 由 CA-CS+R'FT-CS+¥'TB+COS+YX'e, 而 人 = (1,— 
了 S+ 于 了 (1, 一 SS+ 症 ) e， 故 签证 C 店 与 64? 独立， 内需 证 
时 介 与 (人, 一 时 S+ 玉 Ne 独立 ， 由 e002)， 上 述 独 立 性 归 
结 为 其 协 方差 阵 为 外 由 于 

LS+") 0, 

这 确实 是 成 立 的 . 


《五 ) 有 约束 的 情况 ，LS 估计 . 


在 前 面 讨论 的 线性 模型 了 一 卫 B+e 中 , 未 知 的 7 维 回归 系数 
向 量 记 可 在 p 维 向 量 空间 中 自由 地 变化 ， 在 一 些 问题 中 , 语 不 能 
这 样 自 由 变化 , 而 必须 服从 一 定 的 线性 约束 + 

HB=0, 《5 .3.16) 
这 里 五 为 大 x9 上 矩阵， 这 种 情况 在 方差 分 析 申 很 常见 . 

讨论 这 种 有 约束 的 线性 模型 的 -- 个 方法 是 重新 选择 参数 以 消 
去 约束 . 事实 上 ， 如 前 面 指出 的 ， 线 性 模型 了 -下 8B+e 相当 于 
吾 ( 玉 属于 线性 子 空间 { 互 6， 后 任意 } 一 .KN (至 )， 当 及 受 约 束 
(6.2.16) 时 ,于 8 也 受到 约束 , 而 如 (到 ) 现在 的 变化 范围 是 线性 子 
空间 

{XB, HA-0} -=A (¥), (5.2.17) 
在 这 个 子 空间 中 任 选 一 组 基底 惫 ，…, 锡 ,, 记 宝 一 ( 鲍 ,, ---, 齐 )， 
则 
. Y= XB8+e, HB-0 ‘6.2.18) 
由 不 难看 出 , 非 齐 次 的 线 狂 约束 于 Be 可 转化 为 齐 次 的 情况 , 只 需 取 后 致 太刀 
一 此, 虑 户 一 名 代 且 ,并 及 至 一 其 Bo 代 王 ， 
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可 以 用 一 个 无 约束 的 线性 模型 
FT-—Yate (5.2.19) 
来 代替 ， 这 里 = 是 维 的 ， 用 这 个 方法 可 以 把 一 些 无 约束 情况 下 
的 结果 推 到 有 约束 的 情形 ， 但 是 ， 在 不 少时 候 这 样 作 有 其 不 方便 
之 处 , 主要 在 于 , 在 原 模型 中 避 有 特定 的 物理 意义 , 在 转化 为 a 时 ， 
后 者 的 意义 往往 不 明显 , 而 a, BB 之 辣 的 转换 可 能 苏 为 麻烦 . 
由 于 这 个 原因 ， 在 以 下 几 段 中 我 们 致力 于 用 算 阵 的 方法 对 这 
个 问题 作 一 直接 的 处 理 . 
首先 ， 考 元 在 约 上 28-=-0 之 下 及 的 JI 及 估计 ， 这 相当 于 使 
i 一 上 5 上]? 在 吾 5=0 的 条 件 下 达到 最 小 ， 用 Lagrange 乘 数 法 ， 
作 妃 收 ， 和 一 1 了 一 玉 51? 一 和 NHB 求 导数 ,得 到 方程 组 
Sb— H's,— A'F, Hb-D, (5.2.20) 
下 面 的 定理 与 定理 5.2.1 完全 类 似 ， 
定理 .2%.7. 1° 方程 组 (5.2.20) 必 有 解 双 拘 伍 一 解 称 为 局 
在 约束 吾 8 一 0 下 的 LS 估计 }.，2° 方程 组 56.2,20) 关于 五 的 任 
何 解 必 为 上 述 约束 下 的 极 值 问题 的 解 ,反之 亦 燃 . 
证 ，1° 要 证 垣 .2.20) 有 解 , 只 需 证 
ri( 和 )-=(& ) (B.2.21) 
显然 可 假定 吾 的 各 行 钱 性 无 关 。 又 因 初 等 变换 不 变 矩阵 之 秩 , 不 


HH 
失 普 记性 可 设 吾 各 行为 法 正 交 的 、 找 如 合力 ~( 名 ) 为 正 交 
阵 ， 有 


CEN Cd 
(os er) 


(zp -DH 0 ) 
HD 0 0 


he ee Er 2 


国 此 嫩 .2.24) 等 俐 于 
$s -¥ 总 全: YY 
nk(g o )-™(g 0 ) (5.9.22) 


此 处 家 = BD'= (| 0)， 宝 '- DX', 访 - 全 :证 记 
逢 合集， 全 室 和 /SN\ , 
~ (gm) se me)(s 8) 
显然 , 欲 证 届 .2.22), 上 只 需 证 存在 出 , ds, 致 Sd, + 有 d,- 久 ' 了 , 
即 
Sd ds =F, Sd YY. (6.2.23) 
此 方程 组 的 后 一 个 是 线性 模型 了 一 主 ,B+e 的 正则 方程 ， 因 而 必 
有 解 ， 解 出 代入 第 一 方程 得 咯 ， 这 证 明了 (5.3.28) 有 解 因 而 
证 明了 1e， 
2° 设 语 为 全 .3.20) 的 解 ， 而 8 为 任 一 满足 约束 条 件 HB 一 0 
的 向 量 , 则 
IY—X8|"~|Y-XB+X¥B-A 
=IY-XAl+ (BB'S(B-AB) 
+2(F-XAA'IB- 6). (5.2.24) 
因为 所 满足 性 .2.20), 此 式 右边 第 三 项 为 
2(¥'Y- SA'(B—B)-—2MHB- BA) -0 (5.2.25) 
(因为 有 BB-0, HB 一 0)、 因 此 由 (5.2.24) 知 1 卫 一 下 61*>> 了 一 
及 局 |?, 因而 后 为 约束 下 的 极 值 问题 的 解 . _ 
反 过 来 ， 设 记 为 约 东 下 的 极 信 问 题 的 解 , 而 语 为 促 .2.20) 的 
任 一 解 。 根据 已 证 部 分 ，B 也 是 约束 下 的 极 值 问题 的 解 ， 故 必 
有 】 了 一 下 启 j 一 1 了 一 于 B61?， 在 (5.2.24) 中 令 忆 一 应 并 利用 
(5.2.26), 得 
[XB-BI 过- 而 SG- 而 -0 
因而 互 应 -下 房 故 号 启 ~ 呈 局 由 此 可 知 启 也 满足 (5.2.20)、 定 
理 证 毕 ， 
:5 


(六) QM 定理 ( 线 上 段 ): 


线性 函数 c'B8 称 为 在 约束 是 8 一 0 之 下 可 人 入, 若 存 在 er 了 至 
HB =cB. {65.2.26) 
即 a' 了 为 ce'B 在 约束 召 B 一 0 之 下 的 线性 无 偏 估 计 ， 一 切 这 样 的 
估计 中 方差 最 小 者 ， 称 为 cB 在 约束 HB 0 之 下 的 GM 估计 《或 
BLUE)， 在 这 个 定义 下 成 立 着 与 定理 5.2.8 完全 类 位 的 定理 . 

定理 5.2.8( 约 束 下 的 GM 定理 )， 设 e 在 模型 (6.2.18) 下 
可 情 , 又 户 为 有 的 任 一 LS 估计 (在 约束 吾 B8=0 之 下 ), 则 c 忆 为 
c'B8 在 约束 五 8 -0 之 下 的 唯一 的 方差 最 小 线性 无 偏 估计 . 

证 . 首先 指出 ，e'8 在 约束 五 8=0 之 下 可 估 的 充 要 条 件 为 
存在 号 本 致 c'=Q' 下 +5HHH， 事实 上 ， 若 ciB 在 约束 百 B-=0 之 
下 可 估 , 则 有 (5.2.26), 即 

HB=0~> 0 2—e) B= 0 
这 表明 任何 ,车 号 瑟 的 一 切 行 向 量 正 交 , 必 与 下 一 c' 正 交 , 因 
而 革 g-cE_HCH"NY， 即 存在 5 至 及 ' 一 Cc 一 HH'3, 而 c=a' 于 十 
Bb 及 ， 反 过 来, 若 中 一 加 至 -+ 下 再 则 @' 了 了 为 约束 吾 之 下 c'B8 的 无 
途 估 计 . 
1° 先 证 ec: 记 的 无 偏 性 ， 即 
HB-0%>c(EA -A 
一 0 人 (人 下 十 下 再 1 (EA -A -0 (5.2.27) 
由 H&E=HB=0, 上 式 等 价 于 
HB-0%0¥(E(A— 月 - -0. (5.2.28) 
但 全- 玉 'F 了 -+ HX, 因而 . 
SE(A -XH (D+HEW) ~SB+H'EW), 
即 S(E(A) -局 一 HB( 和 ,因此 

(E(B)— -B'S(EA) -PB)- [EH(EB) -8) -0, 

由 此 知 | 主因 (局 一己 上 3-0， 即 下 [ 玉 (BB) 一 一 0， 这 证 明了 
(65.2.28) 因而 (6.2.27) ， 
2° 次 证 c' 衣 与 上 的 取 法 无 关 ， 设 


SB,=E'FHH',, HA,-0, i-1, 2, 
则 有 S ( 语 。 一 房 o) = 了 H 一 和 o)， 催 边 左 乘 (By 一 Bw)'， 册 
HB., = -0 知 (Ba,— Bo) 各 (8, — Bn) 一 小 故 有 吝 (Bw — Be) 
一 0， 由 于 c'8 可 信 ( 在 约束 8 一 0 之 下 ), 有 cw 和 +b'H, 有 
ec 有 .= 如 p.m ‘Xb 一 人 bn. 
这 下 明了 cA 与 有 的 政法 无 闫 
现 证 0" 有 最 小 方差 .。 设 


B-QY, i -Rr (5.2.29) 
为 6.2.20} 任 一 解 , 则 有 (5Q 一 至 ' 一 并 RR)Y 了 -0, HQY 了 =0, 因而 
SQ-X'+ HR, HQ-—0, (5.2.80) 


因而 
Var(e'B)— Var(cQ DD =cQ0'e.0’, 

现 设 WW 了 为 c'B8 在 约束 如 B 一 0 之 下 的 任 一 无 仿 信 计 ， 册 前 已 证 
明 存 在 6 致 c' 一 g' 生 十 玉 , 故 注意 到 HQ=0, 有 c=o XQ, 因 
此 

Varrc' 语 ) —a' TQQF'g.os, (5.2.31) 
而 Varla'F 了 y=-aa.ol 由 SQ- 二 本 RR 和 

QSQ -0 I'+QH'R=0F' (H HQ = 全， 
故 知 好生’ 对称, 即 @@' 至 ' 一 大昌 ,因而 
(ID -GETXQ-QGSQ QF, 
即 鲜 ' 世 ' 为 对 称 酸 等 , 因此 有 
TIT> 4) 08'1", 
《4 守 是 表示 有 4 一 旦 为 半 正 定 方 阵 ) 从 而 0a>a' 了 QQ' 入 'q,， 注意 
到 (5.2.31) ,这 证 明了 Var(e 有 入 Var(oY). 
4° 最 后 证 明 , ec' 司 是 唯一 的 这 种 估计 . 设 wr 了 了 是 任 一 个 这 种 
估计 , 则 由 3° 中 之 证 明 可 知 
lal*=w¥ QT'a= QT'als, 
但 人 名 到" 为 对 称 宕 等 ， 我 们 证 明 ， 若 如 为 对 称 界 等 而 1Maj:= 
bal, 则 必 有 有 Wa =a， 此 因 
+ 二 SE | 


Ma—al:=1Mal?:+ lal:— 20'Ma 
-2 HG 有一 20 M'Ma=2]Ma}:—2| Mal?=0, 
将 这 结果 用 到 此 处 , 有 和 @ 半 =g, 故 0 了 -aXQY 注意 到 QF 
= 所 ( 见 (5.2.29))， 有 oe 了 -a' 革 户 因此 ,由 HA=0, 得 
eB- (aX+bH)B-a¥B-ay, 
这 证 明了 ec' 的 唯一 性 ， 定 理 证 毕 ， 


《七 ) 关于 对 约束 的 要 求 ( 续 上 段 )， 


1. 机 加 上 怎样 的 约束 五 8=-0 才能 使 任 一 线性 函数 cB 在 
这 约束 下 可 估 ? | 

这 问题 的 意义 如 下 : 若 原 模型 了 了 一 于 8+e 为 降 秩 ( 即 TE (入) 
< 史 ， 则 并 非 一 切 e'B 党 可 人 入。 加 上 约束 的 旧 的 正在 于 克服 这 种 
不 便 . 

码 为 c' 训 在 约束 HB-0 之 二 可 估 的 充 要 条 忻 为 存在 @ 所 至 

好 :下 十 玉 再 ， 即 e 一 下 /他 十 五 中， 故 只 有 当即 , 48 人 尾音 变化 时 

YatH% 能 充满 整个 p 维 向 量 空间 才 行 ， 而 这 一 点 的 充 要 条 件 
为 


| a )-?. (B.2.32) 


2. 上 述 问题 也 可 以 从 另 一 个 角度 去 看 ， 显然， 一 切 cB (在 
HB 一 0 之 下 ) 可 俏 的 充 要 条 忻 为 ， 忆 的 任 一 分 量 (在 五 如 =0 之 
下 ) 可 个 而 后 一 点 的 充 要 条 件 为 (5.2.20) 有 唯一 解 . 所 以 ， 
(5.2.32) 也 是 方程 组 5.2.20) 有 唯一 解 的 充 要 条 件 . 不 难 直接 
证 明 ; 若 司 .3.20) 的 解 唯 一 ， 则 民 ,2.82) 成 立 ， 事 实 上， 由 于 


Ss 至 
| )-*( ) 若 后 者 小 于 加 则 前 者 也 小 于 9. 这 时 ， 存在 


和 ro 或 ( )8- 一 0， 这 时 ,车 房 为 (5.3.20) 的 一 解 ， 语 十 在 也 是 


其 解 , 而 这 与 解 的 唯一 性 耳 导 . 
3. 要 加 上 怎样 的 约束 HB 一 0， 才能 合 模 理 不 致 饥 小 ? 后 一 


语 的 意义 是 


{4B B 人 任意} = {XB8. HB =0), (5 .2.83) 
这 个 要 求 的 背景 是 , 加 约束 的 厌 因 是 克 职 模 型 降 秩 带 来 的 困难 , 但 
不 应 过 分 约 东 以 至 损害 模型 的 范围 . 


由 于 后 .3.33) 右边 的 线性 子 空间 包含 于 其 左边 ， 故 下,2.38) 
等 价 于 
dim {了 8，B 任意} 一 dim{ 卫 8, HBB， (5.2.34) 
上 戒 左 边 即 为 ?EK( 昼 ), 关于 右边 , 有 如 下 的 
引 理 5.%.8. 


dim {及 忆 HB~0} =rk( 二) 一 二 GD (5.2.35) 
证 ， 不 失 普 生性 可 假设 五 各 行 线性 无 关 , 又 
dim {XB, HB-0} -aim {( 5 )8. HB~0], (5.2.36) 


H 
找 满 秩 方 阵 P, 使 HP 一 (710) (为 此 只 需 取 忌 ， x( ) 为 满 牧 
方 阵 , 青 令 ( ) 记 四 P= (五 , 五), 则 
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dim {s je HB~0} = ai {(s | P6, BFPB-0 | 


~aim{ 全 ja Ci96-0 


I. 
= dim {( Th. 0 任意 }~ 记 (9)， (5.2.37) 
但 显然 
x(B )-=|(s JPl-n:( r 人 )-"+r or 
~—rk(H) +rk(X¥,), (6.2.38) 


由 (5.2.86) 一 (5.2.88) 得 (6.2.35), 引 理 证 毕 . 
由 这 个 引 理 立即 得 到 ; (5,2.38) 成 立 的 充 娶 条件 为 


s 460. 


k(t 


而 这 个 事实 成 立 的 充 要 条 件 显然 是 
AENY NA -1 (5.2.89) 

邑 互 的 行 向 量 之 尾 一 线性 组 合 若非 零 向 量 风 必 非 五 的 行 向 量 
的 任何 线性 组 合 . 

现在 设 五 使 (6.2.83) 成立, 则 在 约束 有 如 B=-0 之 下 1 了 -8|? 
的 最 小 值 与 没有 约束 时 的 景 小 值 一 样 。， 所 以 , 若 让 是 在 约束 HB 
=0 之 下 达到 最 小 值 的 向 量 ， 则 它 也 是 在 没有 这 个 约束 时 达到 最 
小 值 的 向 量 ( 这 意味 着 方程 组 5.2.20) 的 解 (后 , 四 必 满 足 和 = 站， 
也 就 是 说 , 原 线性 模型 卫 - 下 6-+e 的 正则 方程 组 SB 一 和 了 必 有 
解 ,满足 约束 HB ==0. 

在 方差 分 析 中 , 所 要 加 的 约束 都 需要 满足 本 段 的 性 质 1,， 2, 因 
些 , 申 总结 前 面 的 讨论 而 得 出 的 下 述 定理 有 重要 意义 ，; 

定理 蔬 .%.9， 为 要 使 在 约 京 五 B8 一 0 下 一 切 c'B 缘 为 可 佑 上 且 
模型 的 范围 不 缩小 ( 即 必 .2.8 信 成立)， 必 要 充分 条件 为 (5.2.32) 
加 上 全 .2.89) 。 当 这 些 条 件 成 立时 ,正则 方程 组 SB 一 下 ' 了 有 只 
一 解 6, 满足 是 记 ~ 这 个 应 就 是 在 约束 已 B=-0 之 下 局 的 唯一 
I8 估计 ， 


( 八 ) o? 的 估计 ( 续 上 段 ): 

在 (三 ) 中 我 们 证 明了 :， 若 >= 世 (不 )， 即 为 组 性 子 空 间 
{XB B 任意 } 的 维 数 , 则 二 一 | 了 一 下 局? 为 o= 之 一 无 偏 估计 ， 
在 (五 ) 开 始 处 我 们 已 说 明 :; 施加 约束 再 8 -0 后 , 原来 的 线性 模型 
Y~ 了 8+e 可 转化 到 一 个 等 价 的 、 没 有 约束 的 线性 模型 了 -全 q 
十 e。 这 新 模型 的 残 差 平 方 和 显然 就 是 1 玉 - 工 夺 i25 这 里 友 为 有 


在 约 曙 28B=0 下 任 一 LB 和 估计 ， 又 因 .4( 关 ) ={E6， 瑟 6- 伸 ， 
帮 车 令 


4 一 dim(.A( 室 )) -二 [{ 豆 -本 (By)， (6.2.40) 


则 =z1 了 了 -了 记 上 为 0? 的 一 无 含 估计 ， 


在 有 约束 时 , 定理 8.2.6 的 结论 在 施加 相应 的 修改 后 仍 成 立 ; 
结论 1° 只 需 改 了 为 由 全 .3.40) 决定 的 g 上 和 如 都 改 为 约束 
HB -0 下 之 值 . 结论 2° 除 VAR(CA 户 有 改变 外 , 其它 照 日 (VAR 
(CD) 的 具体 形式 与 吾 有 关 ), 而 8* 一 字 不 改 地 成 立 ， 


《 力 ) VAR(e) ~aG 的 情况 


直到 是 前 为 止 我 们 都 是 在 YABR(e) -oT 之 下 讨论 问题 。 我 
们 乃 到 ， 在 这 种 情况 下 ， 线 性 模型 了 ~ 下 8 十 e 的 一 个 最 重要 的 特 
点 是 , 任 一 可 佑 函数 的 TS 估计 与 其 GM 估 讨 一 致 . 

现在 考虑 较 一 般 的 情况 ， 

Y= XA+e, VAR{e =oG, (6.2.41) 

仍 设 耻 为 % 维 , 局 为 罗 维 ， 此 处 你 为 一 已 知 的 m 阶 正定 方 阵 ， 但 
中 未 知 , 0 之 ?<oo， 当 如 = 时 加 到 已 讨论 过 的 情况 , 

由 于 可 售 性 只 涉及 了 的 均值 而 与 其 方差 阵 无 关 ， 叉 LS 舍 计 
的 定义 根本 不 涉及 ARCTT),， 所 以 ， 前 面 所 给 的 关于 LS 估计 的 
定义 .正则 方程 组 、 关于 ec'B 的 可 估 人 性 的 定 立 和 条 件 , 在 这 里 全 部 
适 有 用， 但 有 以 下 两 个 重要 的 不 同 点 ， 

1° 可 信函 数 c'8 的 IS 估计 ec’ 局 与 其 GM 估计 一 般 不 同 . 

2°181/ Gn—7), r=rk CX), 一 般 不 再 是 o 的 无 偏 估 计 公 一 
了 一 下 房 , 和 为 的 LS 估计 ). 

因此 , 我 们 以 下 的 讨论 , 首先 是 在 全 .3.41) 之 下 求 可 估 画 数 的 
GM 估计 ,以 及 2 的 无 偏 居 计 , 热 后 研究 在 什么 条 件 下 它们 与 18 
估计 一 致 ， 
” ”定理 5.8.10. 设 有 线性 模型 (5.2. 和)， 而 c" 甩 为 一 可 人知 画 
数 , 则 e'8 的 GM 估计 为 

cof- (GE)-E'G-!Y, (5.2.42) 


ne 


其 方差 为 
下 Varte' 房 =ac' (FE'G-1E)+e, (5.2.48) 


Fi (FB)'G-1F-FB) (5.2.44) 
为 cs 之 一 无 偏 估 计 , 此 处 应 = (于 'G-! 蕴 )~ 量 :GY. 

证 ， 由 G>0 知 存在 QD， 致 CFG-!， 作 变换 了 =QY 
则 于 -这 B+8, 其 中 全 ~QX, BQe， 有 

YARIB) -QVAR ee Qo— QGQ0 =0°T. 
因此 , 线性 模型 多 一 吝 9+g 就 是 我 们 前 面 讨论 过 的 那 种 类 型 ， 以 
请 记 8B 在 此 模 弄 下 任 一 TL8 估计 , 即 
(证 全)- 字 = (XG -GY 
则 由 定理 5.2.8( 应 用 于 模型 于 一 宝 B8+e) 知 | 可 信和 函数 c'8 在 新 
禹 型 下 的 GM 合计 为 c' 应 ， 由 于 字 =Q@ 了 为 可 道 线性 变换 ， 知 这 
也 是 原 模型 下 c'B8 的 GM 估计 ， 其 次 , 由 定理 5.2.5, 知 | 
cr .9 

为 之 一 苇 仿 估计 , 但 束 一 斌 启 -@Q(F- 王 态 ， 从 而 控 一 重启 
一 《了 一 了 启 )' 人 一 (了 一 蛙 房 ， 定 理 证 毕 ， 

现在 讨论 第 二 方面 的 问题 , 即 0'6 的 LS 估计 与 其 QM 估计 重 
全 的 条 件 ， 及 癌 与 吧 重 合 的 条 件 。 为 此 引进 如 下 的 概念 。 设 有 4 
为 nn 阶 方 阵 , 而. 帮 为 % 维 向 量 空间 之 一 子 空间 ， 若 

TENAATEA 

则 称 .L 为 4 的 不 变 子 空间 ， 这 个 概念 在 线 代 数 中 是 习 知 的 . 

定理 区 .%.11 (Zyskind) . 在 线 件 模 型 (6.2.41) 之 下 , 为 要 使 
一 切 可 信函 数 的 LS 估计 重合 于 其 GM 估计 ， 充 分 必要 条 件 是 
HM (四) 为 G 的 不 变 子 空间 ?. 

证 ， 首 先 指出 ，{@' 于 4 EE. 站 ( 耻 )} 与 一 切 可 居 和 函数 的 I8 估 
计 的 集合 一 致 ， 显 然 , 后 一 集 必 包含 在 前 一 集 内 ， 反 过 来 , 着 4 E 


1) 这 是 2yakind 在 1967 年 得 出 的 结果 ( 见 Anm, 对 ath, Biatist, 1967, p, 1092)。 
这 里 采用 的 是 与 27sind 的 条 件 等 价 担 较为 简单 的 形式 。 


二 关于 


HF), 则 a= 节 c 对 某 沾 e， 考 虑 可 估 赣 数 q' 玉 B, 其 I 名 估计 为 
6, 其 中 语 为 8 的 任 一 IS 估计 ， 由 正则 方程 有 SA- ¥'Y. 
放 芋 = 时 /下 后- eSBcc'E: 了 =a' 了 了 这 证 戎 了 a! 下 是 可 
信和 函数 的 LS 个 计 ， 
现在 证 明 ; 为 使 一 切 可 佑 函数 的 LS' 估计 重合 于 其 GM 估计 ， 
充 要 条 性 是 ， 对 性 何 GEA( 是 ) 及 CDLAC) ( 即 c 属于 A( 于 ) 
的 正 交 补 空间 .&+ ( 半 )), 有 
Qovta'Y, oF=0Gc-=0, (5.2.45) 
这 实 上 , 设 (5.2. 护 ) 成 立 而 可 局 为 任 一 可 估 范 数 , 其 I 和 GM 估 
计 分 别 为 a' 了 和 BF 了 如 上 所 指出 ,有 EAA), 记 em=6-a, 
出 
Ee YF)-— BBY)— Ee Y) =A—dB8=0. 
即 c' 下 有 =0 对 一 切 有 故 必 至 一 因而 (二 )， 由 个 .3.45) 
知 加 
Var(d'Y) 一 Var(G TN Varte' YF), 
但 了 为 GM 估计 而 9' 了 为 无 偏 估计 , 大 必 有 
O02 Var{te¥) ~oe'Ge, 
”再 由 G>0 知 c=~0， 即 or 了 ~Bb' 了 ， 因 此 ， 任 一 可 信和 函数 di 的 
I8 估计 wr 于 重合 于 其 GM 悄 计 如 了 扩 过 来 ， 识 (全 .2.45) 不 成 
立 。 为 确定 计 ， 设 存在 aEAN(I) 及 cL NI)Y， 致 Qov (oa'Y 
c 了 =>0. 由 ENA() 知 4' 了 为 莱 个 可 估 和 次 数 中 的 L89 
估计 .考虑 加 有 的 估计 (8 十 Mc)!' 于 ,和 待定， 这 显然 是 GZB 的 无 
偏 估 计 , 而 其 方差 次 
Varl@ YF+AC TN = Var(o' FP) + oN Varte' FY), 
由 于 p>0, 取 入 一 0 而 | 和 | 充分 小 ,将 有 
Varta PF+AC' TY) < Var a’ T), 
大 而 ,人 局 的 GM 估计 与 其 LB 估计 a' 了 不 能 重合 ， 
因此 , 为 到 证明 定理 , 只 需 证 明 
(下 ) 为 他 的 不 变 子 空间 多 GrGBe 0 对 任何 
GE) 及 ch)， (5.2.40) 


先 设 {6.2.46) 左边 成 立 ， 任 取 aE.U (四), e 1h (下 )，、 这 时 
BE 有 故 由 CLAOE) 知 (GO c=-Gc-0, 即 必 .2.46) 
右边 成 立 (注意 久 一 多。 反 过 来 , 车 (65.2.46) 左边 不 成 立 ， 则 存 
在 GE.A( 玉 ) 致 GE.A( 玉 ). 这 时 必 存 在 cL.ACE) 致 (Ga)'e 
丈 0， 即 @'Gc 头 0。 这 说 明 上 5.2.46) 右边 不 成 立 ， 从 而 证 明了 
二 .3.46) 两边 的 等 价 性 。 定 还 证 毕 . 

由 这 个 定理 容易 得 出 下 面 的 推论 ， 其 证 明 留 给 读者 作为 练 
3 

系 5.2 .3， 者 以 下 记 往 .&( 了 ) 内 的 投影 变换 窍 阵 ， 人 ~ Px 
二 下 S- 畦 ', 则 定理 中 的 充 要 条 件 等 价 于 8G 人 = TG, 即 他 到 为 对 称 
方 阵 ， 

应 当 注 总 的 是 ， 本 定理 中 的 条 件 是 对 “一切” 可 全 函数 而 言 . 
当 定 理 中 的 条 件 不 成 立时 ,不 能 排斥 对 某 个 特定 的 可 信和 函数 e'， 
其 I 本 计 与 GM 估计 可 以 重合 的 情况 . 

定理 菇 .2.12(Kruskal) ， 若 定理 5.2.11 中 的 充 要 条 件 满足 ， 
则 全 = 到 的 充 要 条 件 是 他 在 .hx 到) 上 为 恒 等 变 换 ， 

证 ， 根 据 定理 .2.11， 有 下 语 - 眉 克 此 处 司 为 后 的 L8 舍 
计 , 而 户 - (了 'G-! 下 )-! 了 G+ 了 ， 这 时 ,如一 0 等 价 于 关系 式 

、 一 站 2 一 《 卫 一 由 "GE 一 站， 
此 处 产 为 正在 .( 互 ) 内 的 投影 ， 由 于 了 一 gE.AI(X) 且 当 王 
任意 变化 时 可 玻 A+ ( 避 ) 内 任何 向 量 , 上 式 等 价 于 
z=wG-w， 对 任何 ww EA CE), {6.2.47) 
由 6.2.45) 易 知 不 仅 - 必 ( 于 ), A: ( 玉 ) 也 是 如 的 不 变 子 空间 ， 由 
此 不 玲 推 知 ，_N( 于 ) 和 .人 ( 互 ) 也 是 人 ~: 的 不 变 子 空间 ， 现 设 
(5.2.4 和 7) 成立, 任 取 xw E.RIT(E) ,2EAt(E), 则 w+2E .AEY, 
因而 
[w+z|?= (+2 (+z), 
| 之 一 地 用 一 (%—2) 在 于 人 元 一 区 

两 式 相 减 , 得 


本 是 全 攻 。 


wiz=Itlw+2j lez mG-iz, 任何 %, zE.N+ (了 ) 

(5.2.48) 

最 然 由 中.2.48) 可 推出 中 .2.47)， 故 二 者 等 价 。 现在 任 取 疼 E 

(了 ), 则 若 怕 .3.48) 成 立 , 将 有 

2 (2 一 G12) ~0， 对 任何 %EM+( 玉 )， 

特别 ， 注 意 到 2 一 人 -ZE.h (本 )， 可 取 2 一 5 一 人 2 由 之 得 出 

jz 一 人 -2z 且 一 0， 即 2 一 他 5 因而 Bz=2z， 对 任何 2E-A()， 

反 过 来 ， 若 人 sx 一 2 对 任何 2zE.LAAL(R)， 则 2z=CGz 对 任何 zE 

-AL (下 )， 这 时 对 一 切 和 有 好 zz= 风 ' 人 -2 因而 (6.2.48) 成 立 , 定理 

证 毕 . 

结合 以 上 两 个 定理 得 到 : 车 
TEARIIGTEAR), PLA FIGLT=Y, 
则 尽管 VARCe) =o2G 可 能 不 是 of， 按照 YAR (e) 一 o 工 的 情 
况 去 估计 8 和 结果 仍 无 变化 . 


§5.3. 线性 假设 的 检验 与 可 信函 数 的 区 间 估 计 


在 本 节 中 ， 我 们 讨论 线性 模型 王 一 下 Be, 了 为 mn 维 8 沟 多 
维 ， 而 e 一 交 铝 , o?1)， 至 于 e~ 入 W003@) 的 场合 (GG>0 已 知 )， 
不 难 用 $5.2( 九 ) 的 方法 转化 为 @ 一 了 工 的 情况 . 

(一 ) 线性 假设 的 三 检验 


” 设 互 为 一 个 xp 矩阵 , 刚 

H. HB=0 (5.8.1) 
称 为 一 个 线性 假设 ， 我 们 米 考虑 这 个 假设 的 似 然 比 检验 : 似 然 本 
数 为 


L(Y B, 0) — (Bs) op( -Brl YXBL), 


由 此 不 难 算出 
M-—sup L(Y, Bo 一 (2m/ 由 -se "YF—X 司 |-wa， 


业 星人 和 二 


Ma=omp{L(Y, B, IHB=00 
= (mw/n) "2e "2| 了 一 站 局 -wa2. 

这 里 请 和 启 分 别 为 语 的 LS 佑 计 及 其 在 约束 互 B-0 之 下 的 
LS 估计 ， 有 显然， 似 然 出 姓 /M# 是 1 了 一 及 记 |2/| 了 一 至 衣 q? 的 严 
增 函 数 ， 记 

SS 一 | 了 上 一 焉 避 1 SS —|Y— 肝 Bu) 一 | 了 一 及 记 . 

(5.8.9) 

容易 证 明 下 面 的 

引 理 各 .3.1. 1° 88eoresr yi r= rk (CR) 2° Sa 
且 ( 全 ,此 处 


v—rk(£) 人 (6.3.3) 


8 TB— E(BEI'SLB— B(BDY /0, (5.3.4) 
而 当 假设 吾 成 立时 部 一 0, 即 88Sx 也 服从 中 心 的 类 分 布 ，8° SIS 
上 与 S85, 独立 {注意 1° 即 定理 乒 .3.6， 1°). 

证 . 设 .Ma( 卫 ) 定 义 如 (5.2.17)， 以 Px 和 Pg,x 分 别 记 往 
-MA( 吾 ) 和 .Ma (时 ) 内 的 投影 变换 矩阵 , 则 如 §5.2 (三 ) 中 所 证 ,有 
IF— Al:= F(T Pra Y, S89,= F'(I- POY, 

而 [一 Px.z 和 工本 都 是 对 称 宕 等 矩阵 , 二 ~N (于 了) 于 

是 依 间 1.1( 三 ), 双 分 布 的 性 质 丸 知 ,1 了 一 专 记 s/o? 和 SS/c 者 

服从 避 分 布 ， 自 由 度 分 别 为 % 一 dim (Mr (性)) 及 nn 一 % 一 tk 

(和), 且 出 1 了 一 于 | 一 588620 知 [了 了 -于 :SS,]/o? 也 服 

从 民 分 布 ,自由 度 沁 为 上 述 两 个 自由 度 之 差 。 依 引 理 5.2.2, 有 
wu— {nn—dim( A (XH)}— (%—rk(¥)) 


一 IE (下 ) 一 dim( ha (X)) ~rECE) 47rk (HY rk 2 ) 


且 BS 与 S35, 独立 . 
S53s/07 为 中 心太 分 布 已 在 定理 5.3.6 中 证 明 。， 根 据 x 分 布 
性 质 g, SSg/o 的 非 中 心 参数 8 由 


" 467 *# 


$7— {SSn/o} nmnar™— 人 {|B -ae 
~—IXA- XB)Y/o = |B E(B /0 
[8- EBD)I'SIB— E(Ba)] /os, 
现 设 是 B89 上 成立， 由 于 发放 为 可 信和 西数 而 下 Bg 为 在 约 东 是 
一 0 之 下 至 忆 的 无 偏 估计 (定理 5.2.8), 知 
HB-0=—> E(XBy) = XB. 
这 证 明了 当 假 设 瑟 成 立时 有 部 =0， 引 理 证 毕 . 
出 这 个 引 理 衬 即 得 到 下 面 的 重 模 定理 ， 
定理 5.8.1， 候 设 (6.3. 二 的 似 然 比 迷 验 为 : 当 
lgg, 
Fs 0) 《5.3 . 国 


所 一 个 
时 否定 ,不 然 就 接受 ， 这 里 0<a<1 一 IE( 吾 1， 而 业 幢 (5.83. 的 
决定 .这 是 (5.3. 了 1D) 的 真实 水 平 为 & 的 相似 检验 . .这 个 检验 的 功 
获 画 数 应 为 
PBB, oo 一 工 一 次 雪 | 二 n—7*, 0, (6.8.0 

此 处 c=Fws-r(), 8 由 6,8. 各 决定 , 而 了 (zjm, % 6) 为 非 中 心 
五 分 布 的 分 布 沙 数 ( 见 1.1()), 

证 .这 个 定理 是 引 理 .3.1 和 下 分 布 定 闵 的 直接 推论 ， 

以 眶 .3. 司 为 香 定 域 的 检验 ， 岂 做 假设 互 B=0 的 到 检验 ， 
嫩 .3. 玉 中 的 .多 称 为 歹 统计 其 . 

最 重要 的 情况 是 ; 再 的 各 行 向 ，…， 表 线性 无 关 且 本 记者 是 


可 信和 本 数 ， 这 时 由 可 信人 性 的 条 件 列 喇 E.A( 下 0， 四 而 站 (去 ) 
~ 让 ( 瑟 ), 从 而 有 
wrk(R)+rk(H) rk(E) = 站 (再 ) -有 (6.3.7) 


即 六 Sx 的 自由 启 等 于 零 候 说 中 可 估 画 数 的 个 数 ， 洲 只 假定 一 切 
可 启 可 居 但 不 必 线 性 无 关 ， 则 仍 有 w 一 rk( 下 )， 这 时 不 必 等 于 
六 而 是 等 于 替 假 设 { 志 一 D i 一 1 对 中 线性 无 关 的 个 数 ， 


号 


-以 上 的 讨论 是 针对 模型 本 身 没 有 约束 的 情况 .车模 型 
T=EB+te, e~NO, of) 


本 身 有 约 东 匡 B=0 (这 个 吾 B=0 是 模型 中 的 固有 成 份 而 非 检验 
对象) 要 在 这 个 基础 上 检验 假设 再 :8 =0、， 一 切 本 质 上 与 前 无 


H A a 
异 . 记 (EF } 以 局。 和 记分 别 记 BB 在 约束 是 8-0 和 五 8 
~0 之 下 的 LS 售 计 , 了 统计 量 为 
_|F- XB IY_ él /| 了 -定局 -js , 
F =- /2 (5.3.5) 
它 在 三 B 一 0 成 立时 服从 分 布 Fo,a_o, 此 处 


-eB )-aeen -| CH | (65.8.8) 
: 如 
-| 福王)- 醋 四) (6B.3.,9, 


一 个 重要 的 特例 是 假设 到 8 = 各 其 中 刺 的 各 行为 的，…, 殉 , 使 
每 个 织 有 在 约束 如 后 =0 下 可 佑 ， 根据 在 约束 再 B=0 下 可 估 的 


. 于 
条 件 ， 每 个 尼 为 下 和 瑟 的 各 行 的 线性 组 合 . 这 说 明 区 (如 ) 
于 
-rx( 局 于 是 由 (5.3.8) 得 到 


v=rk(Hy 一 下 (再 ) =rk (有 )-= (HY), (5.3.10) 
如 果 % 个 可 信函 数 yp, % 一 1，…, 在 约 训 刀 B6 0 之 下 线性 无 
关 ( 即 不 存在 不 同时 为 0 的 常数 0 …, ow 致 且 B80 过 它 ogiB8 
=0), 则 i，…, 纺 线性 无 关 , 且 它们 的 任何 线性 组 合 , 除非 为 0， 
不 能 是 吾 的 各 行 的 任何 线性 组 合 , 这 时 
rk (Hh) =, rk (i 
于 是 由 (5.8.10) 进一步 得 到 


)-xa) +rktH), 
.469 。 


a 


=Tk (HF) 一 此 (B,3.11) 
若 只 知道 中 ，…， 筷 的 任何 线性 组 合 ， 除 非 为 0, 不 能 等 于 五 的 
行 的 任何 线性 组 合 ， 但 Ji, …, gy 不 必 线 性 无 关 ， 则 仍 有 2 一 开 
(HD) , 但 后 者 不 必 为 下 
用 公式 全 .8. 国 和 全 .3. 团 /计算 氏 有 其 不 方便 之 处 ， 在 于 霸 
要 算出 8 的 两 个 8 估计。 下面 的 引 理 给 出 一 个 计算 公式 ， 它 只 
需 在 没有 想 设 的 情况 下 8 的 18 估计 . 
引 理 各 .3.&， 设 有 铸 性 模型 
FF=XB+e, HBS=0, VARe) 一 co 
假设 豆 B=- 避 其 中 本 的 各 行 坎 ，…， 纺 在 约 东 吾 B -0 之 下 线 
性 无 关 , 且 每 个 夷 有 在 约 来 可 B -0 下 可 估 , 出 (记号 准 个 .3.5) 
Sew,—| PF— XB |Y— Bal: | 
= (BD’'(VAR(L BD /oN 1:(H Bs). (6.3.12) 
证 .上 先 考 虑 一 个 特殊 情况 ， 即 约束 根本 不 存在 且 纹 B，…， 
中 8 滨 可 佑 且 线 性 无 关 ， 又 拒 候 设 豆 B=0 改 记 为 吾 8-0， 则 
全 .3.12) 中 的 局 e 和 Bs, 在 此 处 分 别 相 当 于 户 和 局 zs， 此 处 请 为 
无 约束 时 局 的 LS 久 计 ， 又 假定 昼 为 满 秩 的 , 即 :让 (于 ) 一 p， 有 
SB- 于 ' 了 了 SA- EY H'h, HBs=0. ‘6B.3,18) 
“注意 到 A (下) CA( 于 ), 根据 投 影 的 性 质 立 得 
SSg— Xb- -XBal*— (6- B'S(A— Bs) 
一 (有 ,一 一 局 =- - 记 Ha. {5.8.14) 
由 (5.8.19) 第 二 式 得 记 = S-1 (于: 了 YH'N)， 代入 第 三 式 得 
HO IA'F+SI-IH'N 一 0 人 TR 
-=— (HS-:H)~:HS-:X'F~ — (HS*H) HA, 
代入 (5.3.14) 即 得 
SSa™ (Hp: (HS-*H) (HA) 
~ (HA'VAR(HA) /od -HA. 
这 在 上 述 特殊 情况 下 证 明 丁 (5.3.12) 
对 一 般 情况 , 先 根 据 $ 5.2( 五 ) 中 所 论 ， 将 其 化 为 无 约束 情况 
且 使 设计 和 矩阵 为 满 秩 的 , 即 


人 


FY= Yate. 
这 时 瑟 B8=0 转化 为 全 a 一 0, Ha 中 包括 如 个 可 信和 诈 数 且 酌 
本 68-0 和 人 租 a 一 0 是 同一 线性 假设 在 不 间 参 数 表 达 下 的 形式 ， 必 
”有 于 6=QfHe, Q 为 上 阶 满 秩 方 阵 、 由 于 SSw 显然 与 参数 的 选 


择 无 关 , 有 

SSm—SSy= (HD'(VAR (但 5) /oD (HD, 
而 Hr-QFé, VAR(HBn= QVAR(HG)Q 
知 (HO 'VAR CAD /on + (Ha) 


- (EBD'(VAR(HBS /o) (HBn), 
于 是 得 到 SSa= (BD'C(VAR(E BD /od 1 BD. 
即 (5.3.19)， 引 理 证 毕 . 


《二 ) 线性 假设 的 典 则 形式 


在 上 一 盘 中 我 们 推导 了 一 般 线 性 假设 的 五 检验 , 证 明了 其 功 
效 是 通过 非 中 心 了 分 布 来 表达 的 . 在 1938 年 ， 我 国学 者 唐 培 经 
首次 为 此 目的 造 了 表 ， 在 讨论 某 些 理论 性 问题 时 ， 直 接 从 上 一 段 
那 种 一 般 线性 假设 的 形式 出 发 有 时 有 所 不 便 ，1941 年 , 我国 统 计 
学 家 许 宝 又 教授 提出 了 线性 模型 的 一 种 典 则 形式 ( 见 P. 工 _ Hsu， 
dm Eugen, i941, p- 42), 在 理论 研究 上 有 很 大 的 方便 . 

设 有 线性 模型 了 ~ 振 B+e 及 线性 假设 是 8=0. 设 rk() 
=dim CHA( 玉 )) -f+。， 子 空间 -ha (有 下) 一 { 戈 8， 下 8=0} 包含 于 
IL) 内 ， 记 dim(Az( 玉 )) 一 ?一 g， 在 -Hn( 于 ) 中 取 法 正 交 基 
座 直 tw … 在 ， 将 其 扩充 为 (六 ) 的 法 正 交 基底 右 ,…, 喜 并 进 
丽 扩 展 为 金 空间 的 法 正 交 基 席 二 , …, 入. 记 


了 为 正 交 方 阵 ， 作 变换 ~ 了; 则 
了 = TXAB+ Te=y+é, (56.38.15 
ETe， 假 定 e~N 00, 0)， 则 由 引 理 1.1.1， 知 ~NW(0， 


= 7 


a 


0 有 四， 于 是 悟 .3.15 仍 为 一 正 态 线性 模型 由 于 至 BE. ( 王 )， 
故 互 有 为 和 …, 二 的 线性 组 合 , 因此 , 车 记 了 = (yz pp， YD), 则 
y= 0 t= rt ', ny (6.3.16) 
而 当 吾 B80 成 立时 , 卫 BRE Na (对 ), 凤 于 BB 为 ty …, 和 的 线 
性 组 合 , 故 又 有 
Y=0, $=1, ,gq, (6.3.17) 
结合 (6.3.16)，(6.8.17)， 得 正 态 线性 模型 及 线 狂 假设 的 典 则 形 
式 如 下 ， . 
了 一 月 | 十 2 Sm~1, or, TP=60 f+ iit 
五 :局 一 光一 Br 一 0 
其 中 e= (人 …， 二 全 克 加 2 门 ， 记 ，…, 局 为 未 知 参 数 ， 因为 
由 一 般 线性 模型 转化 到 典 则 形式 的 变换 蚜 阵 是 正 交 的 ， 典 则 形式 
所 包罗 的 内 容 并 不 少 于 一 般 形式 ， 而 且 ， 由 于 正 交 变 换 不 变 距离 ， 
所 有 只 与 拭 离 有 关 的 量 的 计算 ， 都 可 以 转移 到 典 则 形式 下 来 进 
行 . 
例如 ,线性 假设 的 了 -检验 统计 量 .多 的 计算 只 涉及 某 些 上 距离 ， 
故 与 在 典 则 形式 下 算出 的 结果 一 样 。 显然 , 在 典 则 形式 (5.3.18) 
之 下 ，& 的 18 估计 就 是 了 ,i 一 1，…, 六 而 在 假设 豆 下，pfonz 
的 18 估计 仍 为 了 aya，…, 了 ,、 于 是 得 到 


iIY—XBl— PD rE LF- XB -Bri DY 
由 此 得 出 


(5.3.,18) 


TL (5.8.19) 
由 对 了 的 假定 立 得 ” 
8 . (5.3.20) 
其 中 
3- 六 Br/as, (5.8.21) 
所 以 , 在 典 则 形式 下 , 非 中 心 参数 6 与 模型 参数 之 间 , 有 很 简单 的 


关系 . 当 假 设 五 成 立时 有 展 一 … 一 Be 一 0， 于 是 由 全 .3.31) 知 


下 7 对 


3=0。 这 样 ,我 们 用 另 一 种 方法 证 明了 定理 5.8.1, 


(三 ) 下 -检验 的 某 些 最 优 性 质 


我 们 在 上 典 册 形式 下 来 讨论 问题 。 由 (一 ) 已 知 : 耳 检 验 是 线性 
搬 设 的 似 航 比 检验 . 然而 ， 如 果 要 问 五 检验 是 否 具有 某 种 准则 
(如 DMP,，UMPU，UMPI 之 类 ) 下 的 最 优 性 。 那么 不 难看 出 : 当 
9 一 1 《用 ( 二 ) 中 的 记号 ) 时 ， 丈 检验 是 UMETU 检验 .但 不 存在 
UMP 检验 ， 这 一 点 从 3.8 的 理论 直接 得 出 ， 但 是 ， 当 y>2 时 ， 
UMPU 检验 根本 不 存在 ， 事 实 上 , 任 取 C 28g) 后 …， ba 不 
局 时 为 小 则 

五 , 84， …，6 都 为 0 

的 水 平 无 偏 答 验 中 , 在 (pa … B50) 处 功效 最 天 的 是 以 


/Ye) 6.3.29) 


rl 
为 否定 域 的 检验 .但 此 检验 与 人 aa，…，5o 有关， 
然而 , 可 以 证 明 : 巡 检验 是 在 一 定 的 变换 群 下 的 UMPI 检验 . 
考 嫂 一 切 形 如 
Z=oTY+ra 
的 变换 , 其 中 0 之 0, 于 为 对 有 角 分 欣 正 交锋 : 
T=DIAG(T,, TE,, Toy, 
其 中 1，Za， 1 分 别 为 8, 7 一 和 nn 一? 阶 正 交 阵 , 而 


0\ 一 g 维 
“(ore (6 .3.23) 
0 /一 nn--7+ 维 


不 难 验证 ， 一 切 这 样 的 变换 构成 一 个 群 如， 车 王 为 正 态 县 YAR 
《 卫 = 上 则 另 仍 为 正 态 , 且 VAR(Z) =0o 了 故人 名 仍 为 正 态 钱 
性 模型 , 又 显然 
加 地 有 一 0 rti<isn = BZ) =0, r+1leisn, 
五 开放 一 站 Ti BLD) =0 Ti<9， 


* 疝 自由 


这 说 明 : 线性 很 设 五 ; 8:=…=Bu 一 0 在 上 述 变换 群生 之 下 不 变 ， 
现在 证 明 ; 上 述 变 换 群 G 的 一 个 极 大 不 变量 是 


SC -ErI/ SY. 
事实 上 , 若 存在 G 中 之 一 变换 9 至 x= gg, 则 显 见 有 (一 
反之 , 若 8(z) ~ 全 ty), 则 存在 o>0, 至 


0 


攻 存 在 正 灾 阵 p, Ts, 致 
(g1 zo /Mo ~ FP 本 Gn, -7, Yo) 
(st 一 

到 T= 了, B= (was po A 0 (Var 而 取 必 如 
(5.3.28), 则 有 2Z=-V 0 Ty 十 #， 人 一 DIAG (T,， 和 ,Ta)， 这 证 
明了 及 (了 确 为 一 个 极 大 不 变量 ， 因 此 ， 侍 何不 变 检 验 必 须 基 于 
六 ()， 或 等 价 地 ， 基 于 统计 量 .多 . 但 多 ~ 本。 rw 因此 ， 寻 找 
UNMEI 检 驻 的 问题 转化 为 在 这 个 非 中 心 尺 分布 族 之 下 ， 假 设 
3S=0<c>83>0 的 UMF 检验 是 否 丰 在 的 问题 ， 亿 fw|g, 一 六 全 
记 Fog,i 的 密度 函数 ， 指 定 铅 >>0, 根据 Neyman-~Pearson 基本 
也 理 ,8 一 0<> 必 一 让 的 水 平 g 的 UMP 检验 有 否定 域 

{FFF |8 各 一 人 /FF |g, sr, O00. (6.3.24) 
根据 到 分 布 的 性 质 o 嫩 工 .1 五 )》 知 局 .3.24) 有 [天 多 >} 的 形 
式 , 而 为 要 司 水 平 为 a 应 取 5~Za v(m)，、 这 样 , 得 到 5 一 0066~ 
5 的 水 平 & 的 UMEP 检验 即 为 (一 ) 中 求 得 的 五 检验 ， 由 于 这 个 
检验 与 机 无 关 , 它 就 是 在 上 述 变 换 群 之 下 的 UMPI 检验 . 


碑 检 验 的 一 个 特点 是 其 功效 西数 只 依 闵 于 8- 宫 Bi/o. 


许 宝 骤 教授 考虑 一 切 具 有 这 种 性 质 的 检验 的 类 . 多 ， 而 证 明了 : 万 
检验 在 类 .多 中 为 UME 的 . 

定理 5.8.%( 许 宝 又 )。 设 有 典 划 形 不 下 的 线 狂 模型 及 线 狂 假 
设 豆 如 司 .3.13), 面 由 为 豆 的 以 


1 Ts 


_- 一 < 
了 SY 各 一 一 六 Piz PFs, 中 一 0 ‘(6.8.25) 


为 否定 域 的 检验 ， 风 为 任 一 港 功效 函数 只 与 9 有 头 的 .水 至 wa 的 检 
验 , 则 
Pu (5) > B08), 对 一 切 3>0. 
许 的 原来 证 明 发 表 于 iometrika，1941，p.…62。、 以 下 给 的 证 
明基 于 定理 3.4.3. 
写 出 天 一人 1， …， 了 的 密度 函数 


(RB) exp( ~ Lk B)’ ~ 好 ) 
-人 ep( 放 82o)ezp[ 一 二 加 28w 
-rl, 


根据 例 1.5.7 玉 定 理工 .6.1， 知 . 

TD -( 7 Yh BFE) Gy, be), 
为 此 分 布 族 的 完全 充分 统计 量 ， 如 果 把 前 面 的 变换 群 台 施加 于 
了 = (本) 上, 则 有 形式 ， 

Fy 4 一 《2 
0 为 9 阶 正 交 阵 ; 
一 在 二 如 二 9 十 4， 有 任意 ; 

LA 
此 群 之 极 大 不 变量 , 即 了 统计 量 多 ,而 让 群 下 的 水 平 a 的 UMPI 
检验 即 为 以 5.3.25) 为 否定 域 的 检验 多 但 群 他 中 任 一 变换 了 
(如 上 ) 在 参数 空间 {B83 ……, Br 罗 : 一 加 把 局 <coy 1 一 二 0 7， 

0<e<co}y 中 导出 的 变换 9 为 
GB pg 一 0 了 0 %, BO' 
了 (8 一 80 
go = 00. 


一 切 这 样 的 8 所 成 的 群 全 的 极 大 不 变量 , 显然 就 是 
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和 本 /和 
3- (S80) /fo. 
根据 定理 3,4,8, 作为 普 换 群 侠 之 下 的 UMPI 检验 的 下 检验 , 在 
一 切 其 功效 尔 数 只 依 蛮 于 这 个 极 大 不 变 其 的 检验 类 中 ， 也 十 
UMP 的 ， 这 就 证 明了 定理 6.8.2. 
1942 年 ，W ald 将 上 述 许 的 结果 加 以 推广 ， Wald 证 明了 : 车 
中 是 吾 ; 刀 二 … 一 有 一 0 的 直 实 水 平 为 a 的 相似 检验 , 则 对 任何 固 


定 的 o>0 及 Barz，…，Br， 由 的 功效 函数 在 球面 | (Bi，…， Bo): 
访 局 -60 中 上 的 平均 值 不 超过 真实 水 平 为 «的 也 答 验 在 该 球面 


上 的 功效 . 

五 检验 还 有 一 个 Minimax 型 的 最 优 人 性质， 为 了 令 述 这 个 住 
质 , 需要 引进 一 个 新 概念 . 

设 昌 为 一 分 布 族 的 参数 空间 , wC@,， w*= 晶 一 w， 考 虑 检验 问 
题 

H. 9Eot> KR, Ew, 
任 取 抽 Eor， 以 瑟 记 检验 问题 豆 过 下 的 一 切 水 平 a 检验 的 类 ， 
记 
A 0) 一 Sap Bn (CB). 
这 里 B5 次 四 的 功效 函数 .对 及 下 的 任 一 水 平 4 的 检验 内 
算出 
Of = sup (Ba — Be ), 


使 C (内 达到 最 小 的 、 互 <> 瑟 的 水 平 a 检验 ， 称 为 再 <> 玉 的 水 平 
& 的 最 严 后 的 检验 (Most Stringent Test) ， 

定理 .8.8。 线性 假设 的 真实 水 平 鸭 a 的 了 检验 ， 是 其 水 平 
ax 的 最 严厉 检验 . 

证 明 可 参考 [站 ,第 8 章 . 


《四 ) 可 和 估 函数 的 区 间 估 访 
设 有 正 态 线性 模型 


saT6" 


FT= B+e, e~Nil. on, HB-=0, 
其 中 于 为 n 行 9 列 . 设 ci 4~1，…，h 十 在 细 束 可 B~0 下 


C1 
个 线性 无 关 的 可 估 函 数 ， 记 c-| : | 要 求 "| : je 
Ch i 
的 区 间 佑 计 . 
记忆 = 启 为 及 在 约 划 下 8-0 下 的 任 -一 LS 估计 ,又 
VAR( 人 办) =-VARICH -ceD， 
五 前 具体 形式 牙 决 于 下 百 及 C. 例如 , 在 无 约束 (可 认为 五 = 站 
时 ， 肋 = CS+C'，S= 瑟 ' 下 ”当下 为 满 秩 时 S+ 可 政 为 S-+， 等 
等 
由 于 e 服从 正 态 分 布 ， 根 据 定理 5.2.6( 如 在 85.2( 八 ) 的 结 
尾 处 指出 的 在 有 约束 时 定理 5.2.6 的 结论 仍 对 ), 有 千 ~ 站 ( 色 ， 
co? 站)， 即 侈 -到 一 下 加 a:D)、 由 民 分 布 的 性 质 了 得 {我们 的 候 
定 保证 了 也 满 区 
= ( 谷 一 和 fo 的 -( 谷 一 到) 
- 丛 一 可 ) (全 一 村)/c? 人 ~ 圳 
记 ~? 一 二 | 了 -下 忆 |? 为 在 约束 8~0 之 下 ， a? 的 
无 偏 估 计 ， 这 里 g 由 (5.2.40) 定 出 ， 则 由 定理 5.2.6,，(n 一 g) 8 
~ 有 -有 且 吕 与 针 独 立 ,因而 羡 与 亚 独 立 , 所 以 
于 (PW) DV) /Ss ~ Po 
从 前 
Peof( 定 一 久 )'D"1( 命 下)/b67 寺 Fn aa)} -1—a. 
因此 , 椭 球 
Su 只) = {四 ( 宣 -- 惠 ) 帮工 (会 -和 < 有 97} 
‘65.83.26) 


包含 未 知 的 畦 的 概率 等 于 Ia， 它 就 是 守 的 置信 系数 为 1 一 a 
的 相似 晤 入 椭 球 ， 


当下 一 工 时 ,出 一 e 有 的 置信 系数 1 一 “的 置信 区 间 为 


[he( 委 )9% 贡生 
此 处 Fy 由 在 Var (内 中 以 8 代 o? 而 得 ,如 在 无 约束 时 
fs E'S+e'. Se 

关于 这 种 估计 的 最 优 性 ,， 当 一 1 时 ,所 得 的 二 区 间 型 的 估计 
时 a ( 生 ) G4 为 UMAU 的 .但 当 k>2 时 , UMAU 区 域 估计 不 
存在 (参看 前 面 关于 线性 假设 的 类 似 结果 )， 可 以 证 明 置 信和 椭 球 
(5.3.26) 有 某 些 Minimax 型 的 最 优 性 质 ， 但 此 处 不 涉及 这 些 细 
节 了 . 

《五 同时 区 间 估 计 


在 同一 个 线性 模型 之 下 ， 往 往 要 对 若干 个 可 居 英 数 作 区 癌 舍 
计 ， 设 有 可 佑 函数 灿 ，…， 帆 ， 我 们 可 用 (四 ) 中 揭 方 法 对 每 个 水 
作 置 信 水 平 1 一 m 的 区 间 悄 计 


记 土 刀 -a (全 ) sw sl ok (5.8.27) 
但 是 , 如 果 天 个 事件 41,…，A 中 ,每 一 个 事件 的 概率 者 是 1 一 6 
则 这 个 事件 同时 发 生 , 邵 事 件 门 4 的 概率 ， 一 般 比 1 一 a 小 , 
愈 大 ,一般 比 1a 小 得 也 你 多， 这 志 示 ,尽管 (5.8.27) 中 每 一 个 
包含 各 自 灿 的 概率 为 1 一 a 但 
EE [Be (SF) 一 dG) Ss | 二 ， 
(5.3.28) 
同时 成 立 的 “置信 系数 ”, 一 般 比 1 一 a 低 很 多 . 


如 果 我 们 要 使 (5.3.28) 中 的 五 个 包含 关系 同时 成 立 的 概率 达 
到 和 名义 上 的 1 一 a， 则 一 个 可 供 选 择 的 办 法 是 把 每 区 间 的 置信 系数 


由 1-a 提 高 到 1 于 这 种 作法 前 缺点 在 于 过 于 保守 .因为 车 
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PP (4) = 工时， 太一 般 有 也 { 们 4 >1~a 而 不 必 为 
1 一 5， 这 导致 过 大 的 置信 系数 而 使 区 间 的 长 度 过 天 另外 , 在 涉 
及 到 五 极 大 其 至 无 限 的 场合 , 这 个 方法 根本 不 适用 . 
关于 这 个 问题 ，Boheffe 提出 了 一 种 方法 ,直接 应 用 置信 罚球 
{5.3.28)，SBeheffe 的 方法 基于 下 面 的 筷 单 事实 (参看 和 [1]): 
引 理 站 .8.8. 设 妥 为 % 阶 正定 方 阵 ， 则 点 在 椭 球 Az 
0 内 (包括 其 边界 ) 的 充 要 条 忻 为 . 
| 无 区 0 2 对 任何 各 维 癌 量 大， 
证、 当 44= 工 时 ， 这 结论 显然 由 媳 正 定 ， 可 央 全 为 是 
一 好 Q, 而 棚 球 成 为 (B20)'Q8 二 0 令 全 X=z, 由 有 丰 = 了 的 情况 知 
和 在 椭 球 守 Avw<e 内 二 88 在 椭 球 2 所 内 
心 [RrQy|<e|| 对 任何 玉 
全 | 现 反 | 雪 丁 全 一 下 [对 任何 无 
| 有) 对 任何 大 
Soheffe 考虑 这 样 的 问题 ， 设 届 ，…， 因为 线性 无 关 的 让 估 透 
数 ， 槛 作 一 切 形 如 时 一 中 加 十 … 十 jp 的 同时 区 向 估计 ， 这 里 
及，…， 了 为 任意 常数 . 
记 玩 -= ( 灿 ，… "根据 引 理 5.3.8, “如 属于 棚 球 
(5.8.26) 等 价 于 
[Rp 人 my | < Fa) SH DR, (6.8.20) 
对 一 切 关 纵向 量 丙 一 (Uy ……， )'， 由 于 
cho = Var (h') = oh' Dh, 
有 6%0~ 5°h' Dh, 
于 是 怕 .3 .29) 可 写 为 
[无 全 一 下 证 | 二 GF, alo)) Os. 
由 此 得 到 下 面 的 定理 . 
定理 右 ,3.4(Seheffa)，、 设 师 ，…， 央 为 天 个 线性 无 关 的 可 估 


函数 。 则 对 一 切 形 如 9 一 凯 ewh 的 g 成 立 一 MV EEEeat0) 6s< 


是 得 7 外。 


9 十 VEAPL -et9) 的 概率 为 1 一 a, 这 里 名 Ga mw 9 的 意义 ,就 
是 前 面 所 说 明 的 . 


如 果 单 拿 出 一 个 特定 的 gp 一 cake 来 作 其 区 间 估计 ， 则 置信 


系数 1 一 a 的 区 间 估 计 为 十 ho( 邹 }6s， 这 区 间 比 Soheffe 定理 


中 给 出 的 短 一 些 ， 但 为 了 要 使 一 切 具 上 述 形 式 的 pq 的 同时 区 间 佑 
守 仍 有 置信 系数 1 一 4， 必 须 在 区 间 长 度 上 付出 这 个 代价 。 (我 们 
留 给 读者 证 明 : &Fu eato 产 Fir-a()， 且 当 率 之 1 时 成 立 严 格 不 
等 号 .) 

关于 同时 区 间 估 计 问 题 ，Tuke7 提出 过 另 一 种 方法 .Tukey 
处 理 的 情况 不 象 Beheffe 处 理 的 那么 一 般 , 但 在 他 的 方法 能 用 的 时 
候 , 往往 在 同样 的 置信 系数 下 ， 比 Seheffe 方法 给 出 的 结果 有 较 高 
的 精度 . 关于 以 上 两 种 方法 及 其 出 较 , 可 参看 Boheffe 的 著作 [11]， 
第 三 章 . 


$ 5.4. 回归 分 析 , 方差 分 析 ， 协 方差 分 析 


前 两 节 所 阐述 的 线性 模型 的 一 般 刺 论 ， 是 回归 分 析 和 方差 分 
析 这 两 个 重要 的 统计 应 用 分 支 的 基础 b。 至 于 协 方 差分 析 ， 从 模 
型 上 看 可 以 认为 是 回归 分 析 和 方差 分 析 的 一 种 混合 。 仔细 地 叙述 
这 些 分 支 的 主要 内 容 , 当然 不 是 本 书 范围 所 及 . 但是, 尽管 这 些 分 
支 的 基础 都 在 于 线性 模型 ， 它 们 都 青 各 自 的 特点 . 反映 在 统计 疗 
题 的 提 法 和 着 重点 上 , 也 就 各 有 差别 , 我 们 想 在 这 里 用 不 大 的 篇 辐 
扼要 地 说 明 一 下 这 些 差 别 和 重点 ， 希 望 这 能 多 少 有 助 于 读者 在 日 
后 销 研 这 些 分 支 ， 


(一 】 回归 分 析 : 估计 和 预测 问题 
在 本 眉 中 ， 我 们 假定 回 扫 模型 已 按 某 种 考 左 选 定 了 ， 关 于 定 
模型 的 问题 到 下 一 段 再 谈 . 


蕊 应 当 指 出 ,有 些 回 归 和 方差 分 析 问 题 ， 并 不 属于 我 们 所 扒 述 的 那 种 线性 模型 。 
. 480 nm 


我 们 只 考虑 线性 回归 .和 既 过 改换 自 变 量 ， 这 种 回归 可 以 写 为 
Y=BtBmt':+ Bte (6.4.1) 

的 形式 , Bo 为 常数 项 ，Bi 称 为 和 月 变量 x 的 回归 系数 , 4 二 1 "…, 阴 . 
4 汶 随 机 误差 ， 思 te) 一 0 Var(@) 一 5 在 考虑 许多 问题 时 往往 有 
区 要 假定 上 服从 正 态 分 布 . 

在 谈 到 回归 分 析 时 ， 一 般 总 候 定 每 个 自 变 量 在 一 定 范围 可 连 
续 取 值 、 回 归 系 数 应 夷 示 自 变量 办 对 因 变 基 工 影响 的 大 小 ， 直 
观 地 , 它 可 以 解释 为 当 wi 改 庄 一 单位 时 ,了 所 (平均 ) 改变 的 量 . 然 
而 , 在 作 这 种 解释 时 必须 慎重 ,因为 各 自 变 量 对 因 变 量 的 影响 往往 
不 是 独立 的 ， 而 是 有 一 定 的 相关 性 ， 这 种 相关 注 的 存在 使 回归 关 
系 的 解释 复杂 化 ， 然 而 ， 若 承认 模型 蕊 .4 恒基 本 可 用 , 则 个 计 系 
数 BB 是 一 件 不 可 少 的 工作 ， 估 计 的 方法 , 一 般 就 使 用 本 章 所 介绍 
的 最 小 二 乘法 .如 要 作 区 摆 估 计 , 则 需 假 定 误差 为 正 态 , 用 856.8 
(四 ) 的 方法 进行 . 近年 来 的 研究 表 骨 , 当 设 计 垂 阵 团 近 于 盈 化 时 ， 
最 小 二 乘 和 估计 的 性 能 往往 不 够 好 , 因 冰 发 展 了 一 些 改进 的 方法 , 这 
些 方 法 已 开始 得 到 一 定 的 使 用 , 然而 , 从 理论 的 角度 看 , 到 目前 为 
止 所 取得 的 结果 还 只 能 认为 是 初步 的 (更 和 5. 委 。 

另 一 个 重要 的 佑 计 问 题 是 估计 画 归 男 数 ， 即 Bo 上 计生， 
十 Byrp。 在 模型 已 定 的 情况 下 ， 这 不 是 一 个 新 闻 题 ， 因 为 在 得 到 
Bo …， 包 的 情 计 ， 例 如 其 LS 估计 遍 ，:…， 启 后， 自然 地 就 用 
应 十 应 轨 十 … 十 局 ao 去 估计 Bo 十 … 十 Bowo， 但 是 ， 从 革 种 意义 上 
看 , 估计 回归 系数 和 合计 回归 函数 还 不 好 说 成 是 完全 一 样 的 问题 ， 
这 一 点 到 后 面 再 解释 . 

个 计 回归 系数 的 目的 是 在 于 了 解 各 自 变 量 对 了 的 影响 大 小 ， 
击 佑 计 回 妇 示 数 的 目的 则 在 于 对 工 的 逢 进行 预测 、 外 推 和 控 制 ， 
押 谓 预测 ， 指 的 是 如 果 我 们 在 某 一 组 指定 的 让 变量 值 (438,，…， 2) 
处 做 试验 , 则 预期 得 到 的 g 值 将 如 何 ? 外 推 问题 的 提 法 完全 一 样 ， 
差别 在 于 一 般 在 谈 到 预测 时 ， 往 往 理解 为 在 自 变 量 已 作 过 试验 的 
范围 内 ， 对 外 推 问题 ， 则 预 浏 点 已 超出 自 变 量 已 作 试验 和 的 范围 之 
外 ， 也 于 在 一 个 区 域内 有 效 的 模型 (包括 其 中 的 参数 具体 值 ) 不 必 
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在 其 它 区 域 仍 有 效 , 因此 , 对 已 估计 出 的 问 归 函 数 作 外 推 应 用 时 千 
要 慎重 ， 如 有 必要 和 可 能 ,应 没 法 检定 已 得 模型 在 预定 外 推 的 区 
域内 基本 上 仍 适 合 , 

预测 的 方法 很 简单 ， 就 用 回归 函数 在 (3, -…, 9) 点 处 的 估计 
值 房 十 应 四 十 十 房 允 = 允 作为 9 的 预测 值 . 预测 误 荆 为 了 一 个 . 
这 里 了 自然 应 理解 为 ,在 点 (3,，…， 网 处 实地 作 试 验 时 ， 可 能 得 
出 的 结果 ， 这 个 试验 是 假定 与 已 作 试验 (它们 的 结果 被 用 来 估计 
Bo，…，Bs 及 误差 方差 0? 等) 独立 的 ， 若 模型 正确 , 则 预 满 是 无 偏 
的 (假定 馈 为 Bi 的 18 居 计 , 下 同 ), 即 五 (Y 一 依 ) ~0， 此 因 

BF) = Bot B+ Bowy, 
而 百人 y= BAD) +HA)+ + A) w= Bot…+ By 至 
于 预测 精度 , 则 取决 于 了 一 企 的 方差 ， 是 然 
Var(Y ~- = Var(Y) +Var(?) 
-+ow" Ba (5.4.2) 

此 处 209 一 0 雹 ,而 BB-VAR(GA, 记 = (Bb, 有) 
召 的 其 体 计算 公 式 已 在 贞 .2.9) 中 给 出 ,需要 注意 的 是 , 在 回归 分 
析 中 , 总 是 要 求 Bo,…， By 都 可 估 ，6.4. 史 的 第 二 项 表示 由 于 辣 
归 应 数 估 计 不 淮 耐 带 来 的 变 养 ， 当 试验 次 数 增 加 时 这 一 部 分 可 以 
缩小 , 然而 ,第 一 部 分 表示 在 点 (好 ，…， 哟 处 一 次 试验 的 变 差 , 而 
这 完全 由 模型 的 精度 所 决定 ， 因 此 , 在 模型 误差 其 大 时 , 不 论 以 前 
作 过 多 少 试验 , 站 降低 预测 误差 上 所 起 的 作用 是 有 限 的 . 

设 以 8? 玫 示 在 85.3{( 三 ) 中 所 定 出 的 o2 的 无 偏 佑 计 ， 则 由 
届 ( 斑 一 人 ) =0 及 个 .4.2), 利用 器 与 王 一 全 的 独立 性 , 即 得 (一 9 
是 如 的 自由 麻 ) 

rp vs 
S[1+e Baar] 

出 此 得 出 置信 系数 为 1 一 a 的 “区 间 预 测 ”. 


他 一。 ($) [L+H Bo SY? 
+ 5 对 [L- ap Bot Va, 
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加 归 应 数 用 于 控制 , 可 以 说 是 预 调 的 反问 题 ， 即 , 法 求 拱 因 变 
其 六 之 值 控制 在 某 个 范围 内 , 荣 点 以 上 或 以 下 , 需要 如 何 调 整 自 
变量 之 值 . 


(二 ) 回归 分 析 : 与 确定 模型 有 关 的 问题 


大 人 性 上 说 , 这 里 包括 两 方面 的 问题 。 一 是 根据 理论 或 经 验 定 
出 一 个 回归 模型 , 一 基 在 选 定 了 回归 模型 后 , 管 样 通过 数据 检验 它 
是 否 合适 , 以 及 进行 一 些 调整 的 问题 . 

我 们 不 讨论 第 一 方面 的 问题 ， 因 为 它 基 本 上 不 是 一 个 数学 问 
题 . 只 措 出 一 点 : 在 缺乏 进行 选择 的 理论 和 经 验 依 据 时 , 往往 只 能 
从 数学 处 理 方便 上 的 考虑 ， 来 选择 一 称 可 能 的 形式 ， 如 密 项 式 之 
类 .在 这 里 , 一 般 要 避免 选择 过 于 复杂 的 形式 , 如 次 数 甚 高 的 多 项 
式 之 类 ， 因为 坚 验 证 明 这 样 做 的 效果 煞 不 甚 理 契 ， 当然 , 过 于 简 、 
单 化 也 是 有 害 的 . 

如 果 想 要 通过 样本 对 所 选 模型 是 否 适 合作 一 个 检验 ， 那 就 需 
要 有 重复 试验 , 即 在 同一 组 自 变量 值 处 进行 重复 试验 . 

设 我们 选 定 了 复 型 二 .4. 巧 ， 而 在 (za， 2 zi 点 处 进行 四 次 
试验 , 结果 为 也 了 一 1 r=】，…, mm， 假定 全 部 %= 克 十 … 
十 rm 次 试验 是 独立 进行 的 ， 记 

及 一 (Bo0, Bs, 内 
最 小 二 乘法 在 于 选择 房 使 


Q(B) -TB)? 
达到 最 小 ， 记 Fi- 过 总 Pw 有 


Q(B) —S8a+ Er, opB)’, (6.4.8) 
其 中 ， 
SSa= 乌 疡 人 so 一 7 (5.4. 


因此 ， 找 记 使 QC 局 = min (8) 的 问题 转化 为 使 “加 权 误 差 平方 


中 眶 8 


和 和” 党.(F, 一 04) * 达 到 最 小 ， 用 求 多 元 函数 极 值 的 方法 , 不 礁 失 
出 户 由 方程 

IRIA=-XRT 
梁 定 , 此 处 R= diag (ri, ty Tn) FF=(F,, ny Fm) "而 于 " 一 (Pd | 
2m) 。 残 差 平方 和 为 


SS 一 已 ( 语 -Sgr Tr, oD SI 上 SS 
(6.4.5) 
(5.4. 辣 把 残 差 平方 和 SS。 分解 为 商 部 分 , 第 一 部 分 SSm， 只 与 在 
同一 点 的 重复 试验 结果 之 间 的 变 着 有关， 因此 它 反映 了 误差 方差 
中 的 大 小 、 实 际 上 , 若 假 定 模型 为 正 态 的 ， 即 误差 服从 分布 (0, 
co, 则 易 见 


Sea 3, o 一 之 一 1 一人 一 1 (56.4.,8) 


由 于 58, 是 一 线性 模型 的 残 差 平方 和 , 根据 (5.2.18) 式 , 它 能 玫 为 
一 个 二 次 型 了 4 五 其 中 了 (在 此 为 全 部 个 因 变 量 试验 值 所 成 的 
向 量 ) 服从 方差 阵 为 "的 正 态 分 布 ,而 和 4 为 敌 等 的 . 根据 ?分布 
人 性质 g， SS。/o? 总 服从 2 分 布 (不 必 为 中 心 的 )， 与 神 型 的 选择 是 
否 正确 无 关 ， 再 由 SSwm>>0， 据 太 分 布 性 质 为 知 SSuayos 也 服从 
好 分 布 , 且 8Su 和 8Su 独立 ， 由 于 8S, 的 自由 度 为 m- @ 上 了， 
知 SS 的 自由 度 为 

了 了 一 mn) -mm -mp—l 
又 SSw 的 非 中 心 参数 8 由 

一己 [了 GD ~m18]/o2 

决定 ， 著 模型 选择 正确 , 则 如 (了 一 地 而 3 一 0, 否则 一般 有 8*>> 
0、， 这 使 我 们 有 根据 提出 下 面 的 检验 ,计算 


1 1 
F eh -过 


当 抑 王 Fyjs-mko 时 ,否定 所 选择 的 模型 .要 这 个 作法 有 效 ， 必 鹏 


和 . 


Sam， 


>m, 即 至 少 有 一 个 试验 点 作 了 重复 试验 .. 

这 个 方法 的 缺点 在 于 需要 作 较 多 的 试验 , 特别 是 , 在 数据 是 由 
观察 所 得 而 不 能 由 人 们 任意 安排 试验 点 时 ， 重 复数 据 往往 不 存在 
而 此 法 不 可 行 ， 在 这 种 情况 下 , 人 们 有 时 采用 这 样 的 办 法 ; 把 已 有 
数据 留 下 一 部 分 , 不 在 估计 六 型 中 的 参数 时 使 用 它 , 然后 用 这 批 保 
留 数 据 去 核验 扬 配 出 的 回归 函数 的 符合 好 坏 。 在 有 时 间 性 的 资料 
证 , 往往 把 最 近期 的 资料 贸 下 作为 核验 . 

除 此 以 外 ， 下 面 几 个 问题 也 或 多 或 少 牵 涉 到 模型 选择 的 检定 
问题 . 

工 .一 个 习惯 是 在 选 定 了 回归 模型 并 有 了 一 批 试验 教 据 后 , 检 
验 “所 有 和 变量 的 回归 系数 都 为 ”这 个 假设 . 如 果 这 假设 通过 ， 
则 认为 所 选 自 变量 与 因 变 重 的 关系 甚 微 , 因而 模型 不 可 用 , 和 否则 就 
认为 可 用 然而 , 在 作出 这 类 解释 时 需要 层 重 。 上 述 假 设 之 所 以 
被 道 过 , 固然 可 能 是 由 于 自 变 贡 与 四 变量 的 相关 人 竹 甚 币 , 但 也 可 能 
是 由 于 数据 太 少 或 试验 误差 太 大 ， 反 过 来 . 这 假设 之 被 否定 至 才 
上 只 能 说 明 : 扬 选 自 变 量 与 因 变 量 之 间 有 一 定 的 相关 性 , 但 这 不 足以 
说 明 模 型 中 确实 把 对 固 变量 有 显著 影响 的 自 变 量 都 收 进来 了 ， 也 
不 足以 说 明 所 配 出 的 方程 确实 可 用 。 根本 之 处 在 于 ,回归 分 析 方 
法 在 相当 程度 上 只 能 算是 一 个 经 验方 法 ， 它 的 怡 当 应 用 (除了 统 
计 知 识 以 外 ) 需 要 有 关于 特定 问题 的 专业 知识 和 实战 经 验 ， 

2. 关于 为 决定 某 一 或 某 些 自 变 量 能 和 朱 从 模型 中 去 掉 而 进行 
的 检验 , 也 可 用 同一 精神 来 进行 分 析 . 

3. 有 时 ， 人 们 从 “所 选 模型 正确 "这 一 前 提出 发 ， 而 要 检验 实 
际 的 模型 ( 即 由 真正 参数 值 代 入 后 所 得 的 模型 ) 是 否 有 某 种 特定 的 
形状 。 例如 , 要 检验 一 个 线性 回归 是 否 通 过 原点 。 这 种 问题 一 般 
掺 成 齐 次 或 韭 齐 次 的 线性 假设 的 检验 问题 ， 因 而 可 用 5.8 的 方 
法 处 理 . 

4. 还 有 一 类 问题 是 对 两 个 《或 多 个 ) 回归 模型 作 比较 ， 设 考 
虚 受 同一 批 自 变 量 刀 ，…， 2 影响 的 两 个 因 变 量 了 ， 2， 并 认为 各 
自 的 模型 是 线性 的 : 


了 一 B 十 Br 二 十 Bee 十 6 (5.4.D 

之 = 启 十 记 zwi 十 十 局 wp 十 5 
ev 和 (0, 0，5~ 信 (0, ao 各 自 模型 都 独立 地 得 到 一 批 试验 数 
据 ，、 要 验证 这 黄 个 模型 是 否 一致 ， 归 线 为 检验 8. 一 Bl，i 一 0。1 
…, 加， 也 可 以 只 在 某 些 方 面 一致 ， 如 基 几 个 回归 系数 相等 之 类 ， 
这 也 容易 化 为 一 般 线 性 模型 的 线性 假设 的 检验 问题 . 因为 ， 若 
马 仿 模 型 的 设计 托 阵 分 别 为 王 和 室 ， 则 到 = 发 BTe， 爷 = 富 
十 8 (注意 这 里 的 卫 名 ez 的 意义 已 与 司 .4. 们 不 同 ， 这 种 差别 
已 在 §5.1 中 解释 过 见 代 .1.10) 式 下 面 的 说 肖 ), 它 可 以 合并 
成 为 一 个 统一 的 线性 模型 

钱 一 二 "后 "十 @ 

其 中 


F , /XO %, /18 ,fe 
(2) (3 和 (4) 。-(?) 
而 假设 忆 = 户 显然 是 关于 后 ' 的 一 个 线性 假设 ， 因 而 可 按 和 5.3 的 


方法 处 还 . 
男 一 个 极 重要 的 间 题 是 关于 回归 由 变量 准 选择 向 题 . 
(三 ) 回归 分 析 : 自 变 量 的 选择 问题 


设 在 一 项 研究 中 我 们 注意 的 指标 ( 因 变 重 ) 是 了 了 ， 且 认为 一 切 
对 yy 可 能 有 较 显 著 影 响 的 自 变量 都 搜集 到 了 .在 比较 党 杂 的 问题 
中 ， 往 往 涉 及 的 自 变 量 个 数 p 很 大 ， 所 以 ， 就 是 线性 回归 模型 
(5.4.12 是 治 当 的 .一 个 包含 这 么 多 自 变量 的 系统 在 计算 土 、 上 起 
用 上 有 有 其 不 合 , 而 且 往 往 使 稳定 性 变 得 很 差 而 带 来 不 良 后 困 , 因此 
人 人 们 希望 从 众多 的 自 变 量 中 , 只 挑 出 为 数 不 太 多 的 若干 个 , 而 把关 
系 较为 次 要 的 都 和 掉 ， 

由 于 这 向 晤 的 实际 意义 ,， 近 十 多 年 来 在 文献 中 ,从 挑选 标准 、 
计算 方法 及 理论 根据 几 个 角度 , 进行 了 大 量 的 探讨 尽管 从 理论 
土 奢 所 得 结果 还 很 初步 ， 但 目前 的 研究 成 果 已 对 实际 应 用 产生 了 
不 少 影 响 ， 由 于 本 韦 的 性 质 , 没有 可 能 较 详 细 地 评介 这 些 工作 , 而 


是 册 BG 


只 能 对 这 个 问题 的 意义 , 从 预测 的 角度 略 作 一 点 说 明 ， 较 仔 细 的 
讨论 ,可 参看 陈 希 也 与 王 松 桂 著 《 近 代 回 妇 分 析 欠 安徽 教育 出 版 
社 1987 年 ) 第 三 章 . 
我 们 只 想 说 明 一 点 : 即使 采用 包括 全 部 自 变 是 的 模型 下 .4.1) 
在 理论 上 是 正确 的 , 丢掉 其 中 一 部 分 次 要 的 自 变量 , 仍 有 可 能 改善 
预测 效果 . 
我 们 将 包含 组 数据 及 全 部 自 变 量 的 线性 模型 写 为 
Y= XB8+e, 
并 称 之 为 全 模型 ， 将 革 分 块 为 至 一 《 且 p| 在 p), 相应 地 把 六 分 解 为 
Bp 
2-( Bs ) 
如 果 我 们 将 回归 系数 在 Ba 中 的 那些 自 变量 全 丢掉 , 则 得 到 一 个 线 
性 模型 
Y= XpBp+e, 
它 不 妨 暂 称 之 为 选 模型 ， 
尹 定 在 全 模型 和 选 模型 之 下 ， 且 和 Bs 的 LS 司 计 分 别 为 启 和 


EB,. 各 要 在 点 一 ( 人 站 预测 因 变 量 之 试验 值 了 ， 出 
在 全 模型 下 , 用 全 一 到 后 预测 误差 为 刀 = 卫 一 zz 房 
在 选 模 型 下 ， 用 了 cp 一 wp 训 p， 预 测 误差 为 Dp 了 一 4p， 我 
们 以 均 廊 误 差 作 为 衡量 好 坏 的 标准 ， 这 就 是 说 , 要 算出 加 CD) 和 
加 (DD, 看 谁 大 谁 小 ， 由 于 在 全 模型 下 w 房 为 了 的 元 偏 琉 测 ， 知 
如 (De9 ~Var(DD), 于 是 由 (5.4.2) 得 到 
BD =o?[io (TE' A 有) 1ix]， (5.4.8) 
又 BODD 一 Var(DP) 十 盏 (Dz)， 而 
VartDp) 0 [十 wp 《时 5b 宝 p12Pp]， 
要 计算 吾 (Dp), 注意 Bp 一 (了?P 耶 p) 二 下 5 及 因而 
B Bp) — (pFp) RPE(YT) 一 (至 用 1 rE 
= (EF) -1 Kol Ea) B= Bot ABs. 
其 中 


» Ts 


通 一 (发 9 时 P) 下 是 种 8， (5.4.0) 


于 是 
BED) =- EOI)— wrB Bp) =wB— wr (Bot ABs) 
mrBr— TpABs. 
从 而 得 到 
ED =o {1+ (Rp) mp] + Cr AB — TBe) 
(5.4.10) 
为 比较 百人 3 和 吾 CD 了 DD), 需要 下 面 的 引 理 . 
引 理 上 6. 有 .1. 设 正定 方 阵 型 写成 分 块 的 形式 ， 
从 而 
az 直 
、 _ 他 和 
则 车 记 闭 -> o 将 有 
i= (a— Be, c= Cb = -a be 
(5B.4.11) 
、 «a b\/a 6, I 0 
人 人- 人 aa 


eat+ bb 一 了 如 二 CCi 一 二 站 十 1 一 心 ， 入 + ch =0, 
从 第 三 式 解 出 而 = 一 0" 半 6 代入 第 二 式 得 (ce 一 Bq :Bey 工人 从 
而 得 出 ca， 第 一 式 类 似 证 明 . 
5 
现 记 KK- { 2 “)， 共 中 a- 了 ;Zn 而 
ri | & 
(PX) = ( 交 ) 
出 有 {Var(D) — Var (De) }/oa? 
一 省 PICP + 2 PD et Wn — Pn 1rp. 
由 引 理 5.4.1 得 ga=arT!+be-0'， 交 换 ( 9? 所 4 把 
be WB 总 
地 上位, 得 而 = 十 妈 c= 1 bcib'a-:， 代 入 上 式 , 得 
sd38。 


ee me et a di a mm 


{Var(D) ~ Var (Dp) /os 
i 
-= (bq pp — Va) COG gp — Rr) 
一 (dp 一 wp) ci Tp — wr). 5.44.1 人 2 
其 中 惟一 0- 场 一 (于 玉 p) 证 5 年 p, 则 (5.4.9)， 叉 
(weABr— wrBn)— Armp— me) BrBrn Ar — wr). 
(5.4.13) 
由 5.4,10), (5,4.12), (5,4,13) ,得 
BDD— ED = (A'vp— wa)' (oc — BrBln) (A'zp — ws). 
由 此 式 可 知 , 车 o2c1 一 BnB4>0, 则 将 有 卫 (D” 庆 如 (7%), 因而 于 
掉 Br 所 相应 的 那些 自 变 量 是 有 利 的 ， 若 记 序 。 为 Be 在 全 模型 中 
的 LS 估计 , 则 YARCBs) =o?cy 因而 上 述 条 件 成 为 
TAR >Gna6e. (5.4.14) 
(6.4.14) 表 胃 ; 在 上 Bs| 很 小 ,或 者 VAR(B5) 很 大 (这 表示 Bs 估计 
得 很 不 准 ) 时 , 丢掉 Bs 所 相应 的 那些 自 变 量 对 改善 秆 测 效 果 有 利 . 
所 以 , 轨 然 全 模型 从 理论 上 说 正确 ， 但 是 如 果 有 些 自 姿 量 对 了 的 
关系 很 次 要 ， 或 考 它们 的 回归 系数 不 易 准确 估计 时 ， 把 它们 丢掉 
(这 时 所 得 模型 从 理论 上 看 可 以 说 是 “不 正确 ") 非 但 无 害 ， 反 而 有 
益 ， 由 此 可 以 看 出 自 变量 选择 问题 的 意义 ， 

上 面 这 种 类 型 的 讨论 也 可 以 提供 选择 自 变量 的 淮 则 , 不 过 , 我 
们 不 深入 这 个 问题 了 ， 

以 上 的 讨论 也 吉明， 选择 自 变量 的 问题 必须 结合 一 定 的 应 用 
目的 来 讨论 ， 在 上 面 , 我 们 的 目的 是 预测 ， 如 果 目 的 是 估计 一 部 
分 自 变量 的 回归 系数 ,如 Bs, 也 将 得 出 类 似 的 结论 ， 可 以 指出 其 
它 某 些 自 的 ,在 其 中 所 得 出 的 标准 就 稍 有 不 同 ， 例 如 , 若 我 们 的 目 
的 只 是 在 作 过 试验 的 点 所 在 区 城内 去 预测 , 则 丢掉 Bx 的 条 件 可 以 
比 尼 ,4.1 多 更 松 一 些 ， 这 也 就 解释 了 (一 ) 中 的 一 个 提 法 ， 即 估计 
各 归 系 数 和 估计 回归 函数 不 好 说 成 是 完全 一 样 的 问题 因为 ， 例 
如 说 , 在 为 这 两 种 昌 的 而 考虑 自 变 最 选择 问题 时 , 就 不 完全 一 样 ， 
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(四 ) 方差 分 析 : 一 般 讨论 


回归 分 析 嚼 然 也 有 设计 的 问题 ( 即 选 择 那 些 自 变 呈 慎 作 试 
验 )， 但 分 析 上 的 茜 本 问题 可 以 在 一 定 程度 上 不 涉及 到 设计 来 进 
行 讨论 , 如 我 们 在 上 面 几 段 中 所 作 的 ， 比 较 起 来 , 方差 分 析 的 讨论 
更 不 能 脱离 设计 来 考虑 ， 因 此 我 们 只 能 限于 指 油 几 点 最 一 般 性 的 
东西 . 

从 一 个 意义 上 说 ， 通 常 放 在 “方差 分 析 ”这 个 名 目下 处 理 的 河 
题 ， 从 根本 上 说 与 园 妇 分 析 是 一 致 的 ， 邑 者 是 要 研究 一 些 因 素 ( 自 
变 基 ) 对 某 个 (或 多 个 ) 指 标 ( 因 变量 ) 的 关系 ， 差 别 在 于 ， 

1. 回归 分 析 中 所 涉及 的 自 人 变量 一 般 是 到 连 续 值 的 数 斌 因素 ， 
询 在 方差 分 析 中 , 不 少 是 属性 因素 (例如 三 种 不 同 的 小 麦 品种 ), 即 
使 因素 本 身 是 数量 福 的 , 也 只 在 几 个 选 定 的 值 去 考虑 , 可 以 说 这 样 
将 其 属性 化 了 . 

2. 从 目的 上 说 , 网 归 分 析 在 于 找 出 自 变 量 与 因 变 量 之 间 关系 
的 数学 形式 ( 即 右 归 冰 数 )})， 而 方差 分 析 的 重点 则 在 于 判定 各 因素 
对 指标 有 无 影响 和 影响 大 小 ， 因 素 之 间 的 关系 (所 谓 交 互 作 用 ) 的 
有 无 ,当然 也 不 能 忽视 估计 问题 

3, 从 并 型 上 说 , 回归 分 析 的 设计 定 阵 一 般 是 汐 获 的 , 不 带 约束 
条 件 的 . 在 方差 分 析 中 , 设计 和 矩阵 中 的 元 只 十 指示 菏 一 效应 在 某 
次 试验 中 的 有 无 ， 故 一 般 只 取 了 奔 两 个 值 ， 因 而 设计 证 阵 儿 是 降 
秩 的 , 需要 加 上 约束 条 件 . 在 分 析 的 形式 上 , 方差 分 析 者 重 在 总 平 
方 和 按 各 效应 的 分 解 , 这 需要 对 设计 有 一 定 的 要 求 ， 

说 得 更 具体 一 点 , 对 方差 分 析 问 题 , 线性 模型 

YFY—pBi+Bmt+:.t Ppste 5.4.1 

中 ，& 寄 示 总 平均 ,这 一 般 只 是 一 个 度量 芒 点 , 无 其 实际 含义 ， 其 
余 的 B 则 分 成 若干 群 。 例 如 , 为 考虑 种 子 和 肥料 这 两 个 因素 对 产 
晤 (了 的 影响 ， 设 种 子 有 了 种 ,肥料 有 种 (也 问 以 是 同一 种 肥料 
的 施用 量 ), 则 有 工 个 系数 , 例如 局 ,，…，B;, 分 别 撒 未 这 工 个 种 子 
旧 种 对 产 重 的 获 庶 。 它 们 构成 一 组 、 而 “品种 误 上 席 ” 的 有 无 则 取决 
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于 局, …， Br 是 否 同时 为 0， 同样 ,“ 肥 料 效应 ” 占 了 另 一 组 访 例 
如 房 : …，Rrtv 模型 中 的 其 余 系 数 自 成 一 组 ， 拱 示 “ 品 种 "和 "“ 肥 
料 ” 这 商 个 因素 出 于 相互 关系 而 给 产量 带 来 的 效应 ， 岂 交互 效应 . 
纯 属 于 一 个 因素 的 效应 则 称 为 主 效应 , 例如 , 上 述 P， …， 玫 示 
品种 这 个 因素 的 主 殖 应 ， 又 ,交互 效应 又 可 山 分 为 一 级 、 二 级 …” 
分 别 刻 划 两 个 、 三 个 …… 因 素 之 辐 的 相互 作用 对 指标 的 效应 ， 员 
外 ， 在 模 弄 丰 .4.1 国 中 往往 有 一 组 系数 夫 示 出 于 试验 条 忻 不 条 而 
产生 的 效应 , 囊 区 组 效应 ， 每 一 组 内 (即刻 划 某 种 效应 ) 的 系数 一 
般 有 一 定 的 约束 条 件 ， 对 主 效应 击 言 一 般 是 其 和 为 0， 而 对 交互 
效应 而 言 则 有 较 复杂 的 形式 .所 施 吉 的 爹 部 约束 条 件 几 平一 无 例 
外 地 满足 定理 5.2.9 中 的 条 件 . 

对 这 种 模型 , 所 考虑 的 统计 问题 大 致 有 

IT， 检 验 各 种 效应 是 否 存 在 ， 拿 上 例 来 说 , 要 检验 品种 效应 是 
否 存 在 , 相当 于 检验 有 一 … 一 Br 一 0. 

2. 车 基 种 效应 经 检验 认为 存在 ， 就 可 以 考虑 更 进一步 的 间 
题 ， 如 品种 效应 存在 ,我 们 可 进一步 提出 B= ps 的 检验 问题 ,或 
Bi 一 Bs 的 情 计 问题 ， 这 意味 着 进一步 考虑 第 一 、 二 两 个 品种 有 无 
差别 或 差别 大 小 的 问题 . 

3. 在 这 些 分 析 的 基础 上 , 定 出 各 因素 的 一 个 (或 多 个 } 最 好 的 
组 合 , 以 利于 对 指标 发 挥 最 好 的 效果 , 如 在 上 俩 中 , 要 找 出 品种 - 肥 
料 的 一 个 配合 , 以 使 最 天 限度 地 所 高 产量 . 

从 某 种 意义 上 说 ， 方 差分 析 中 处 理 的 问题 要 出 回归 分 析 复 杂 
些 , 因为 后 者 的 主要 内 容 在 于 回归 函数 , 而 在 方差 分 析 中 则 涉及 到 
众多 的 效应 的 检验 和 估计 间 题 . 正 因为 如 此 , 要 显 利 地 作 到 这 一 
点 , 试验 的 设计 ( 即 设计 德 阵 下 的 选择 ) 就 至 为 重要 ， 当 设计 恰当 
时 一 切 计 算 或 多 或 少 有 一 种 简便 移 烙 式 , 否 其 就 极为 复杂 不仅 
如 此 , 还 会 产生 解释 上 的 问题 , 这 主要 在 于 , 如 果 设 计 缺 乏 一 种 在 
下 面 将 要 加 以 说 明 的 正 交 性 , 出 可 能 出 现 这 样 的 情况 ; 两 个 因素 中 
每 一 个 的 效应 单独 被 检验 时 , 都 可 以 认为 不 显著 , 但 同时 被 检验 时 
则 表现 很 显著 .设计 的 正 交 性 保证 了 在 所 取 模 型 中 这 种 情况 不 会 
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出 现 ， 因 而 使 检验 蛙 亲 的 解释 变 得 简单 明了 .， 由 于 这 个 问题 的 重 
要 性 , 我 们 在 下 面 对 它 作 较 为 仔细 一 些 的 说 明 . 


(五 ) 方差 分 析 , 设计 的 正 交 性 要 求 


设计 的 正 交 竹 的 要 求 的 要 自在 于 ， 如 果 在 模型 中 令 某 些 因 车 
前 主 效应 或 交互 效应 为 0 则 其 余 ( 未 令 为 0 的 ) 效 应 的 LS 估计 不 
受 影 响 ， 即 与 在 不 假定 上 述 效 应 为 0 时 房 得 的 估计 一 致 。 这 保证 
了 对 每 个 效应 的 估计 , 不 受到 其 它 效应 的 影响 ， 这 个 铺 议 的 实际 
童 要 性 是 明显 的 ， 

要 黎 到 这 一 点 , 设计 矩阵 了 必须 满足 如 下 的 条 件 ， 


站 1 0 
SS='- Ss 
0 ” 局 。 


这 上 曝 B11, 局 >， "yy Sr 都 是 方 阵 ， 每 一 抉 相 应 于 一 组 效应 ， 即 一 个 
办 素 的 主 效应 或 若干 办 案 的 交 筷 效应， 通常 ， Sn 为 一 行 一 列 , 相 
应 于 总 平均 , 故 5 就 等 于 试验 次 数 %， 根 据 公式 后 .3.1 的 ， 有 
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Re 为 相应 于 第 去 组 效应 的 回归 系数 , 后 为 其 LS 估计 ， 对 i=1 
而 言 , Boy= 了 而 序 SB 一 np 故 得 


p> (人 了 一 了 2 一 SS。 + FS Bn, (8.4.10) 


再 根据 公式 全 .3.12)， 应 SB 就 是 SSa。 瑟 ,为 假设 Bow 一 0， 
这 样 ， 从 这 个 分 解 式 一 举 得 到 为 检验 各 假设 6o=Q@ 的 殖 统 计量 
的 分 子 { 当 以 其 自由 度 )， 绰 .4.18) 的 左边 常 称 鸭 总 变 差 平方 和 ， 
它 根 据 该 式 , 分 解 为 一 个 由 误差 而 来 的 成 份 SS,。 以 及 其 余 若干 个 
成 份 ， 每 一 个 反映 了 一 组 效应 ， 邯 一 个 因素 的 主 获 应 或 若干 因素 
的 变 互 作用 。 对 指标 影响 的 大 小 。 在 误差 服从 正 访 分 布 时 ， 傅 
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Qoohran 定理 (x? 分 布 性 质 0) (6.4.16) 有 边 各 项 独立 , SS,/o? 服 
从 中 心 妇 分 布 ,每 个 应 ,SuBwycs 服从 非 中 心 分布 ,而 在 假设 
局 w= 和 0 成 立时 为 中 心 的 ， 方 差分 析 这 个 名 称 ， 在 很 大 程度 上 就 是 
由 这 个 分 解 式 得 来 的 ， 要 是 设计 没有 所 定义 的 那 种 正 奕 性， 则 没 
有 这 样 简单 的 分 解 式 . 这 时 不 仪 每 个 SSy(H! 指 假设 Bw 一 站 的 
计算 很 复杂 ， 而 且 车 以 五 sy 记 假设 {8w 一 0，Bo 一 各 ， 5S 也 不 
必 等 于 SS5. 十 S55, 这 时 在 答 验 结 果 的 解释 上 就 很 成 问题 ， 以 此 
之 故 ， 妊 果 说 方差 分 析 只 适用 于 正 交 设计 的 场合 ， 也 不 算 太 过 分 . 
这 样 看 来 , 在 多 因素 试验 中 正 交 设计 鼎 据 着 特殊 的 地 位 , 也 就 不 难 
理解 了 . 

由 于 正 交 设计 在 容 用 上 上 的 重要 性 ， 已 就 一 些 常用 的 设计 编制 
上 成 表格 ， 即 所 谓 正 交 表 、， 关 于 这 种 正 交 表 的 严格 定义 、 编制 方法 、 
以 及 利用 这 种 表格 进行 试验 设计 和 结果 的 分 析 等 ， 在 此 不 作 和 仔细 
讨论 . 


《六 )》 协 方差 分 析 


我 们 先 举 一 个 简单 的 例子 ， 然 后 就 引进 一 般 的 概念 ， 设 要 比 
较 两 种 饲料 配合 对 加 快 猪 的 生长 的 优 劣 ， 这 时 必须 拿 一 些小 猪 去 
作 试 验 ， 这 些 参与 试验 的 小 猪 , 其 开始 体重 各 不 一 样 , 而 这 可 能 会 
对 其 以 后 的 生长 速度 有 影响 ， 为 了 使 对 两 种 饲料 的 比较 建立 在 更 
客观 的 基础 上 ， 禹 要 把 小 猪 的 开始 体重 作为 一 个 因素 放 到 模型 中 
来 考虑 . 

在 本 问题 中 , 一 个 因素 是 饲料 , 它 取 两 个 “ 值 ” 是 一 个 属性 因 
素 , 关于 它 的 比较 , 是 方差 分 析 性 质 的 问题 。 另 一 个 因素 即 小 猪 的 
开始 体重 , 是 一 个 连续 变量 , 在 此 是 作为 回归 因素 来 寻 理 ， 因 过 在 
本 例 中 ， 存 在 着 两 种 问题 (方差 和 回归 分 析 ) 的 混合 。 这 就 是 所 请 
坊 方 差分 析 间 题 ， 谈 到 协 方差 问 题 , 一 般 情况 总 是 ;所感 兴 趣 前 主 
要 是 其 方差 分 析 部 分 ， 回 归 部 分 只 是 作为 一 些 适 要 消去 的 干扰 因 
素来 处 理 ， 当 然 ， 在 分 析 中 所 得 到 的 有 关 这 一 部 分 的 信息 也 常 是 
有 有 用 的 ， 
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因此 , 一般 好 我 们 考虑 这 样 一 个 线性 模型 

F= 用: 十 下 3 有 十 e， (B.4.17) 
在 我 们 心目 中 ,Xa 是 模型 的 方差 分 析 部 分 而 蛙 :8 是 其 回归 分 
析 部 分 ， 对 @ 一 般 有 一 些 约束 条 件 ， 灶 处 不 必 上 明白 写 出 ， 我 们 主 
更 感 兴趣 的 是 关于 a 的 某 些 检验 和 估计 问题 . 

(5.4.17) 当然 属于 以 前 所 考虑 的 那 种 线性 模型 ， 只 需 取 
(KI), 7- (6) 就 有 了 一 下 y+e， 这 样 看 米 , 协 方差 分 
析 中 所 要 解决 的 问题 , 都 已 经 包括 在 以 前 的 讨论 中 了 ， 但 是 , 重 秘 
之 点 在 于 ; 协 方 着 分析 是 这 样 一 种 技巧 , 它 能 利用 关于 模型 

F= Xat+e 6.4.18) 
的 方差 分 析 结 果 来 处 理 在 模型 (5.4.17 中 关于 g 的 问题 ， 这 就 简 
化 了 计算 , 因为 , 由 于 丙种 类 型 因素 的 混合 , 模型 (5.4.17) 很 不 规 
则 , 因而 直接 由 它 世 发 进行 有 关 的 计算 是 很 复杂 . 

现在 我 们 来 具体 地 论述 , 作为 协 方差 分 析 的 要 和 旨 药 上 述 技巧 ， 
是 如何 实现 的 . 

由 06. 和 .17) 有 Y— 2X.8- ate. 因此 ， 著 记 往 := 下 4 下 1， 
& 一 a 的 LS 估计 (满足 一 定 约 东 ), 语 = 有 的 LS 估计， 这 里 IS 信 
计 都 是 指 在 模型 (5.4.17) 之 下 的 ， 基 有 

t= SrAX(YFT— XA8), BG.4.19 
此 处 假定 已 对 全 7 进行 适当 选择 ， 以 使 & 满 足 约 束 ， 同 样 ， 记 
忆 ~- 下? 下 ,将 有 


BS:1X(F- Xfy. (5.4.20) 

由 于 在 我 们 心目 中 6 是 思 归 部 分 , 假定 了 Sz! 存在 ， 以 (5.4.19) 
代入 (5.4.20), 不 难得 出 ~ 

及 sbC1 一 全 S7 肝 1) 人 BT ST) (6.4.21) 

我 们 来 仓 细 观察 一 下 这 个 方程 ， 为 方便 计 , 暂 以 三 ，…, 册 记 至 ， 

的 9 个 列 向 量 ， 注意 到 根据 公式 (个 ,2.19， 了 一 是 的 下 1 不 是 别 

的 , 正 是 在 对 模型 5.4.18) 作 方差 分 析 时 , 所 得 残 差 平方 和 93 的 

二 次 型 的 方 阵 。 因此 ， 如 果 已 经 作 过 了 所 .4 和.18) 的 方差 分 析 并 得 
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到 85, 为 PQP, 则 7 阶 的 方 阵 下 5(T 一 五 人 7 下 让 证; 的 GG 用 元 
就 是 外 Gas 而 (5.4.21) 右边 的 向 量 药 第 ? 元 就 是 习 人 @ 开 这 样 ， 
在 计算 方程 (5.4. 氏 ) 中 的 系数 时 ， 可 利用 已 作 的 方差 分 析 部 分 的 
辣 果 .出 于 氏 必 1; 这 样 的 量 带 有 协 方差 的 气味 ,这 种 分 析 得 到 了 
4 协 方差 分析 ”的 省 称 . 

为 了 计算 模型 下 .4.17) 的 残 差 平方 和 , 注意 , 若 以 由 (5.4.21) 
解 出 的 请 代 入 (5.4.17), 上 县 暂时 记 王 一 下 语 - 了", 则 所 求 残 差 平 
方 和 为 

Ss ~ min IF*— Xal?, 
依 公式 (6.2.13), 结业 为 
SS -QI 了- (FA)'Q(F- XB). 
此 处 @@= 了 一 下 0ST 五:， 利 用 全.4.2 了 ,不 难 算出 
SI- YQF— (XQ ' (XIQXD) XIQD). 
(6 .4.22) 

(8 在 模型 出 .4.17) 中 的 可 估 竹 保证 了 《 芋 5@ 玉 s) -+ 存在， 请 读者 
自己 弄 明 白 这 是 为 什么 ，) 

(5.4.232) 右边 第 一 项 就 是 模型 他.4.18) 的 残 差 平方 和 、 右 过 
第 二 项 表示 由 于 考虑 到 回归 变量 (党 称 为 协 变量 ) 的 存在 ， 通 过 消 
去 它们 的 影响 而 更 来 的 残 差 平方 和 的 下 锋 ， 故 这 一 部 分 可 看 作 直 
于 进行 协 方差 分 析 面 带 来 的 收益 ， 全 .4.22) 右边 第 二 项 的 计算 是 
借助 于 由 方差 分 析 部 分 得 出 的 @ 然而 ， 我们 看 到 , 如 果 协 变量 的 
个 数 ( 即 有 的 维 数 ) 较 多 时 ， 级 热 作 了 这 种 利用 ， 计 算 仍然 是 很 繁 
复 的 、 

瑰 在 考 岂 关于 a 的 某 一 线 往 假设 的 检验 问题 。 为 此 , 需要 在 
将 这 个 最 设 Ha 一 0 加 入 到 模型 .4.17) 以 后 , 再 计算 其 残 差 平方 
和 1, 然后 算出 S88 一 6 一 86;, 再 利用 定理 5.3.1， 计 算 63 
的 公式 仍 是 起.4.20)， 不 过 其 中 日 要 改 为 名 人 是 在 将 假设 Ha 
-0 加 入 到 模型 (5.4.18) 后 ， 算 出 的 残 差 平方 和 56, 这 个 二 次 理 
的 方 阵 ， 因 此 , 只 要 Ha =0 这 个 假设 检验 问题 在 纯 方 差分 析 模 型 
(5.4.18) 中 已 解决 过 ， 则 其 结果 可 用 来 解决 有 关 问 一 假设 在 模型 
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6.4.17) 中 检验 的 计算 问题 。 这 样 看 来 ,如果 我 们 预定 要 在 模型 
化.4.17) 之 下 对 a 作 一 系列 的 检验 ， 则 只 需 先 在 纯 方 差分 析 模 型 
全 .4.17 门 之 下 作 这 些 检 验 ， 然 后 使 用 上 述 技 芋 将 所 得 结果 用 于 模 
型 二 ,4.18) 中 ， 如 果 模 型 司 .4.18) 中 的 方差 分 析 部 分 是 经 过 和 良好 
设计 的 ， 出 相应 的 问题 在 模型 晤 .4.13) 中 不 难 解决 且 往 往 已 有 了 
现成 的 公式 ， 这 时 在 模型 皇 .4.18) 下 的 有 关 计 算 就 可 以 相当 地 简 
化 ， 这 一 点 如 前 所 说 , 正 是 协 方 莹 分 析 的 实质 . 

车 C'a 是 we 的 一 可 估 冰 数 , 要 在 模型 (5.4.17) 之 下 来 估计 它 . 
由 垣 .4.19), 其 I8 估计 为 

rp 4 (5 .4.28) 

上 式 右边 第 一 项 即 为 ca 在 模型 (6.4:18) 下 的 1L8 估 计 ， 洲 以 
下 (于 ) 记 这 个 稍 计 ,并 以 启 , …, 应 记 后 的 > 个 分 量 , 则 有 


ca -DA (5.4.24) 


这 里 gt 为 至 的 第 4 列 ，i= 1 mr， 所 以 ， 仍 如 检验 问题 一 样 ， 
若 相 应 的 估计 问题 在 纯 方 关 分 析 模 型 (5.4.18) 中 已 处 理 过 了 ， 则 
其 结果 可 用 于 泥 合 模型 (8.4.17) 中 同一 问题 的 处 理 ， 

如 要 作 ce 的 区 癌 佑 计 ， 则 需 算 由 Yar(e' 人 .为 此 需要 算出 
VAR (全 ,而 这 又 需要 算出 VAR( 司 及 0OV (局 ， 由 (5.4.2D) 
解 出 局, 有 


J 


B-— XQX) XQY, 全 一 站 一 天 Si 在 1 


由 此 得 出 VAR(B) ~ (XLQXs) 0, 
COV(Y, 启 ~ QH EIQYY 
二 此 不 难得 出 TAR 人 全 的 公式 . 


~ $5.5, 组 性 估计 类 
{一 ) 改进 LS 估计 的 努力 


在 线性 模型 中 , LS 估计 具有 十 分 重要 的 地 位 ， 这 主要 是 由 于 
Guase-Markov 定理 (在 YAR( 人 一 5 的 情 襄 下 )。 但 是 ，18 估 


= GB 


计 只 是 在 线性 而 元 偏 的 息 计 类 中 ， 具有 方差 最 小 的 优越 性 、 而 从 
判决 函数 的 观点 看 来 , 无 偏 性 这 个 要 求 不 是 必需 的 , 有 时 其 至 是 不 
是 取 的 . 因此 自然 地 提出 问题 , 能 各 在 非 无 仿 线 性 估计 类 中 找到 
某 种 估计 ， 它 在 一 定 意义 (如 沟 方 误差 最 小 ) 下 优 于 IS 估计 ? 这 
问题 的 提出 使 得 有 必 疲 对 线 福 估 计 类 作 一 较为 深入 的 考察 . 

实际 应 用 中 也 常 有 这 样 的 经 验 ， 在 一 些 情 况 下 LS 个 计 的 玫 
现 甚 差 ， 这 固然 可 能 是 由 于 种 种 原因 ， 但 LS 估计 在 某 些 情况 下 
不 必 是 最 好 的 估计 这 一 点 ， 到 目前 为 止 可 以 说 已 有 了 相当 的 理论 
和 实践 的 依据 . 

设 有 线性 模型 了 = 下 忆 +e， 假 定 8 可 佑 ( 即 其 任 一 分 量 可 
估 )， 对 8 的 任何 居 计 镶 以 工 (及 记 均 方 误差 

LB) =BYB~BI). 
我 们 求 计 算 一 下 , 当局 为 有 的 IS 估 计 记 时， 此 值 为 多 少 ， 由 于 
(由 可 估 知 二 -+ 存在 ) 
B- B=S-:X'(XB+e) BB-S-1¥'e 
故 | 周 一 8 一 e 工 SS-: 素 一 er 第 S-: 必 Je 假定 e~N (0, 0 中， 
即 得 
L(A -EB(e' I-*T'e) ~ otr EH- FE") 
一 ozfr (S-? 下 :发 ) rtrdS 9) 
一 ostr (8-1) -o 疡 元. 


这 里 ha …， 和 为 号 -下 下 的 全 部 特征 殷 ， 如 果 号 接近 于 降 各， 
则 min js0 而 研 ( 司 ) 很 大 ， 在 这 种 情况 下 ，LS 估 计 忆 就 不 会 给 


出 如 的 比较 良好 的 估计 . 

注 ， 这 个 分 析 只 是 说 明了 在 某 些 情况 下 LS 合计 确 不 够 好 , 
但 以 之 作为 存在 着 优 于 让 的 估计 的 论据 ， 则 阅 不 足 ， 因 为 在 设计 
矩 库 接近 退化 时 ，8 接近 于 不 可 佑 ( 即 : 极 大 地 改变 认可 以 对 及 8 
影响 甚 微 )， 可 以 设想 , 不 论 用 什么 方法 也 难于 根本 克服 这 个 本 质 
困难 ， 所 作 的 分 析 在 数学 上 明确 地 表现 了 这 一 事实 。 但 是 , 这 辣 
题 还 可 以 从 另外 的 角度 看。 见 后 . 


i 


由 于 LS 估计 在 有 些 情况 下 的 不 够 理想 的 表现 ， 近 十 多 年 来 ， 
一 些 统计 学 者 在 为 提出 更 好 的 估计 这 方面 作 了 一 些 工作 。 这 些 工 
作 在 实际 应 用 上 已 产生 了 一 定 的 影响 因此 在 下 面 抬 其 中 较为 重 
要 的 作 一 很 简略 的 介绍 ， 只 是 作为 下 文 讨论 的 缘起 。 有 关 的 细节 
需要 到 文献 中 去 找 . 

工龄 回归 (Ridge regression) 这 是 下 . 瑟 Hoerl 在 六 十 年 
代 提 出 过 的 一 个 概念 ，1970 年 ， 他 和 Kennard 在 一 项 工作 中 系 
统 地 介绍 了 这 个 方法 ( 见 Tochnomeiries, 1970, p. 55)， 此 后 有 过 
不 少 工作 对 之 作 进 一 步 的 讨论 . 

这 个 方法 的 思想 是 基于 上 述 的 分 析 ， 即 当 5 的 最 小 特征 根据 
近 0 时 , 召 (j 记 BI) 很 大 ， 为 试图 克服 这 一 点 ， 用 仿 +kI 代 与 
以 人 为 这 把 最 小 特征 根 由 min x 提高 到 min + 如 希望 这 样 能 


有 勋 子 降低 均 方 误 瓷 ， 即 , 用 
请 ( 昌 = (号 上 + 有 -下 :到 
作为 的 估计 , 这 里 >0 待 选 ， 用 形 如 这 样 的 房 (的 佑 计 忆 以 
及 与 之 有 关联 的 一 整套 方法 , 就 叫做 崔 回归 分 析 . 
在 应 用 上 ， 主 要 的 问题 之 一 就 是 怎样 定 大 迄今 为 止 诸 家 提 
出 的 选择 方法 不 下 十 余 种 ， 但 没有 一 种 被 证 明 为 显著 地 优 于 其 
它 。 由 于 回归 分 析 不 是 本 书 的 任务 , 此 处 不 去 触及 这 些 问题 。 我 
们 只 想 对 这 种 估计 在 降低 均 方 误差 这 个 目标 上 的 作用 进行 一 点 讨 
论 ， 有 显然 
Bt) = B+ED -ISH'YT— (+EIY- SR 
(T+ikS- -BZp, 
此 时 玉 = + 了 记 一人 +kT)-!， 易 网 如 5 和 到, 者 
正定 , 且 
ZIT-EW= WS- SW,. 
现 计算 。 
HU ~ BUA BIS) = E(ZB -BI 
=EdZ2B8—A) 十 《一石 如 | 
A 十 ma(， 


"Be 


nb) = BIB -BZ BAB)] 
— HleTS-g FSH'el 
otr(E S19 ZS 1 有 NN 
TA 
=—0tr( SWZ2) = otr (WZ) 
0![tr( Wh) ~ ktr WD], 


车 以 为 ，…， 入 记 含 的 特征 根 ， 则 所 ;的 特征 根 为 -二 


1 
元 + 于 是 得 到 
1 E 总 和 
i) -0 D2 十 -站 -为 (EESEN 
再 由 奴 一 J 一 一 上 kWh 知 
ra lh) =B' (Bs I) (Zs TB -hpB'(S+EL) -8, 
于 是 得 到 


五 (一 可 :六 


+EB' (SHS+ LIN:B. 


CA ys 

直接 计算 瑟 '(2), 不 难看 出 吾 '(0) <0, 于 是 存在 >0, 至 
H(A <H(O), 

即 HUB BIW <ECOA- Bn. 


这 说 明 ， 适当 选择 >0 可 降低 均 方 误差 .但 应 注意 到 : 使 五 (及 
过 玉 (0) 成 立 的 上 与 未 知 参 数 B 和 0 有关， 要 找到 一 个 不 依 款 于 
,0 的 >0， 售 五 ( 们 < 达 (0) 对 一 切 8, o 者 成立， 显然 是 不 可 
能 的 。 这样 帮 来 ， 擒 加 归并 未 能 对 政 善后 的 均 方 误 莹 作出 贡献. 
但 是 , 它 提供 了 一 个 途径 使 有 可 能 车 万 不 取 为 常数 而 与 样本 有 关 ， 
将 能 缩小 均 方 误差 。 所以, 有 用 的 岭 回归 估计 必然 是 非 线性 估计 ， 
是 “线性 其 家、。 非 线性 其 里 ”的 估计， 
2. 压缩 咎 计 可 以 证 明 ; 岭 厨 妇 有 这 样 的 性 质 ， 
B01<IB) 3 E>0, Pro0. (5.5.1) 
因此 , 户 () 是 一 种 压缩 性 的 估计 ,但 非 均匀 压缩 。 一 些 学 涯 从 种 
种 考虑 出 发 ， 提 出 局，0<< 上 <1 型 的 均匀 压缩 佑 计 《 简 称 压 缩合 


9 有 


计 y， 认 为 这 在 有 些 情 况 下 优 于 房 

说 明 这 件 事 的 一 个 最 简单 的 论点 是 , 计算 

8g( 想 一 如 (| 有 -8 一 委 本 (8 一 BBS+ 寺 一 有 中 8| 
易 见 9 (了 D>0, 轩 此 存在 0<k<l 至 

yh) <ytD) = EB -BI’. 

这 梯 , 用 局 代 8 可 缩小 均 方 误差 .但 与 模型 的 未 知 参数 有 关 ， 
因而 与 岭 辐 归 的 情况 一 样 ， 仅 是 上 述 简 单 论 点 不 足以 威 为 改善 了 
局 的 证 明 ， 有 用 的 压缩 估计 慑 中 的 下 必然 与 祥 本 有 关 ， 因 而 也 
是 一 种 非 线性 估计 Stein 和 James 的 工作 (是 例 2.4.9 的 发 展 ) 
指 由 了 8 的 一 种 有 用 的 选择 方法 ，1975 年 ，Farebrother 对 压缩 
估计 提供 了 另外 一 种 论点 ， 在 这 个 基础 上 有 人 提出 了 用 闪 代 决定 
的 作法 , 求 出 也 的 送 代 极限 值 . 

3. 主 成 分 估计 (Prineipal Component 了 stimatey 这 方法 的 


至 关 在 于 通过 改换 参数 将 线性 模型 
F=B+e (5.5.2) 
化 为 标准 形 ; 
Y=XP'PB+e= Tete, (5.5.3) 


此 处 刁 为 正 交 方 阵 ， 臻 PSP'=disg Gas ,My)， w=PB. 这 
时 ,天 定 & 的 [估计 的 正则 方程 为 


和 0 多 
和 a= 锡 :P=| :| 
0 >, 


由 是 得 出 多 1 
当 ) 很 小 时 ，wx 在 模型 中 实际 上 不 能 发 挥 作 用 而 它 又 很 礁 信 准 ， 
根据 选择 自 变量 的 原则 , 在 新 模型 (5.5.8) 中 , 不 如 把 它 去 撞 ， 我 
们 不 妨 假定 >>)e>>…>>ja>0， 把 其 申 与 某 个 界限 以 下 的 特征 要 
2 相应 的 m 者 去掉 ,这 等 于 说 , 以 

在 = (Gr 名 0, 0)! 
估计 a， 然后 由 关系 =Pa 得 有 的 估计 


BoD» 


agen E TA ar ee 


B=Ps, 

这 称 为 请 的 主 成 分 估计 ， 在 实际 应 用 中 有 一 个 怎样 选择 这 个 界 
限 的 问题 , 即 丢掉 那些 wu 

主 成 分 相 计 和 和 龄 回归 估计 一 样 , 都 是 从 仿 的 一 些 特征 根 接 近 
于 0 这 个 现象 着 眼 ， 从 计算 的 角度 看 这 种 考 碟 也 是 有 益 的 ， 因 为 
数据 的 不 准 、 计 算 上 的 误差 也 可 能 使 态 的 某 些 特征 根 很 接近 0 
当 这 个 情况 发 生 时 会 导致 严重 的 误差 。 主 成 份 积 龄 回归 情 计 对 闫 
习 这 种 误差 的 后 困 肯 定 是 有 益 的 . 在 这 方面 应 当 指 出 ; Marquardt 
从 非 组 性 回归 和 迭代 计算 的 角度 着 眼 ， 在 1968 年 也 提出 过 这 种 想 
法 、 不 过 , 他 并 未 把 这 作为 一 个 代替 LS 估计 的 方法 提 引 来 . 


(二 ) 预备 知识 


在 (一 ) 中 ， 我 们 讨论 了 几 个 试图 作为 及 的 TB 估计 应 的 改进 
的 估计 ， 绪 果 发 现 ， 如 果 要 在 平方 损失 下 对 请 实 正 有 所 政 进 ， 必 
须 使 这 种 估计 非 线性 化 ， 事 实 上 , 用 G-M 定理 容易 证 明 ， 在 平方 
损失 下 , 严格 地 局 限于 线性 估计 类 中 ,不 能 改进 嫩 的 I8 估 计 合 
就 是 说 ， 不 能 找到 一 个 线 竹 估计 4 了 (4 不 依赖 了 )， 使 对 一 切 
(8, 四 有 、 

E(AP- Bl» <E(B—ABI’, 
且 不 等 号 至 少 对 一 组 (8, o) 成立 ， 这 个 问题 与 下 面 的 问题 有 密切 
联系 : 设 cB 可 估 , 0' 冯 为 其 LB 针 GM 合计 (本 节 中 我 们 总 假定 
VAR(e) =cafr)， 不 能 找到 c'B 的 一 个 线性 估计 四 到 使 对 一 切 
(8, 中 有 
BI{o FY-—epB «EIR eA)", 

且 不 等 号 至 少 对 一 组 (8, 四 成 立 ， 根 据 8 2.4 所 引进 的 估计 的 可 
容许 性 概念， 上 述 问题 可 说 成 : 所 和 cr 局 分 别 作 为 及 和 erB 的 佑 
计 , 在 平方 损失 下 , 在 一 切线 性 估计 的 类 中 是 否 有 可 容许 性 ， 

为 了 下 文 的 需要 ， 我 们 引进 如 下 的 较为 一 般 的 提 法 . 设 t 是 
的 一 个 估计 量 (6 可 以 是 多 维 的 ) BB 为 一 正定 或 半 正 定 方 阵 ， 如 
时 不 存在 9 的 另 一 信 计 如 ,至 


» S01 


BE OB DI ERED BE OD)), vw.6.4) 


对 一 切 8 且 不 等 号 至 少 对 一 个 成 立 , 则 记 为 vb， 若 不 存在 6 
的 另 一 估计 志 数 

E[(i— ~ 站] <B[t— nN (5B.5.5) 
对 一 切 8 且 不 等 号 至 少 对 一 个 9 成 立 , 则 记 为 &~0. 注 意 (5.5.5) 
是 在 半 正 定 和 正定 意义 下 的 矩阵 不 等 式 , 


引 理光 .5.1， 若 对 任何 ec 有 cE 必 c9, 则 必 有 ~ 
证 ， 若 不 然 , 则 存在 站 致 全 .5. 国 成 立 , 县 不 等 号 对 某 个 =- 
成 立 ， 隆 是 存在 ee% 小 致 
ELIE- ED ELH- Ne, 
且 不 等 号 对 = 机 成立， 这 签 于 说 
BH[(eF et BI et 
对 一 切 B 县 不 秒 号 对 有 = 页 成立 , 这 显然 与 引 理 的 假设 予 盾 . 
引 理 5.5.2. 车 Bo>0 且 人 39, 旭 t 马 69, 对 任何 B>>0. 
证 ， 易 见 
to BirtL B10, 
10 © BtL BY0, D~ BiBBs. 
由 此 可 知 可 以 对 一 了 的 博 况 来 证 这 引 理 . 


用 反正 法 ， 设 对 某 个 C>@ t<8 不 成 立 ， 则 存在 9 的 售 计 
二 致 对 一 切 8 有 
EBD)CE DI ERE OCE-0], (5.5.6) 
且 不 等 号 对 某 个 0 一 名 成 立 ， 以 入 记 CC 的 最 大 特征 根 ， 并 记 厂 
~ 和 IC( 显 然 下 < 站， 而 作 个 计 
tt+F,—d), 
《5.5.6) 在 C 换 成 五 时 仍 成 立 ， 现 计算 
GO) = EIQ-O GEO ~ BL 0'(t-0)] 
+ EC aE | 
+ BLE -A'FE-0)]. 


» 502, 


内 了 < 得 天 所 忆 故 
GO EE HDI TE -DF DD] 

+E[G—OD'FE~H) + HIE)'P EA] 

= EL + EE DFE 0] 
+E[( -DD'F( -A 

mE ANC 
-EE—D'FE-D] 

把 召 [ 寻 一 的 ' 导 一 各 ], 且 不 等 号 对 如 一 加 成 立 . 


这 与 8 矛盾, 引 理 证 毕 . 

引 理 占 .5.3( 第 阵 的 特征 分 解 )， 设 卫 为 YX 上 矩阵 ,7 了 实 六 IE 
(五 ) 一 g, 则 上 可 表 为 上 PGQ' 的 形状 ， 其 中 瑟 为 了 阶 正 交 阵 ， 
G=DIAGOG, OD, 人 > 了 0 之 鞭 为 9， 而 @' 为 + xk 阵 , 其 各 行 法 
正 交 ， 

若 +>E 则 奶 有 工 =PGe&', G6 与 前 一 样 ， Q 为 正 交 阵 ， 瑟 为 
MX 下 阵 , 其 各 列 法 正 交 ， 

证 .考虑 7< 的 情况 由 于 LL' 为 对 称 半 正定 ， 序 在 正 交 
阵 .已 致 PLL'P'- 为 对 角形 ， A—diag (Ws, 5 六 Gy 0, yy 0), 
>0, 2=1,…, 9， 记 PL- 有 4,， 则 可 知 生 之 前 7 了 行 正 交 且 不 次 
0, 后 rr 一 g 行 全 为 0, 故 

骨 =diag (NVM Wy ~ hg, 0, py 0S=GS, 

忍 前 Y 行 法 正 交 , 后 + 一 9 行 可 任意 选择 , 我 们 选择 之 使 号 种 行 法 
正 交 ,， 由 PL-4=GS 知 L=-P'GS， 改写 P' 为 S 为 @ 即 
得 . 

引 理 当 . 攻 .和 设 和 4 为 非 对 称 方 阵 , 则 存在 正 交 阵 瑟 致 

iriPA) >tr(d). 

证 . 先 设 4-( 外 且 为 确定 计 设 ce<d， 取 正 交 阵 已 一 

(7 人 8>0 充分 小 ，8 二 V28 一 上 这 时 本 (了 4 一 区 


8 
(= 一 gC6+ 人 二 3 一 0 ，、 由 于 0~6>0, 且 当 0<s < 时 ， > 


= BO. 


V8 ,显然 取 s>0 充分 小 ,将 及 CP.A)>> 红 ( 肌 )， 
对 一 般 情况 办 归纳 法 。 役 加 阶 方 阵 丰 非 对 称 ， 则 奏 在 和 4 的 
一 个 一 1 阶 的 非 对 称 主子 式 , 为 方便 计 设 在 各 的 左上 角 , 即 


,1 电 
4-( 下 小 


依 归 纳 假 设 ， 存在 % 一 1 阶 正 交 阵 sp， 致 证 (本 -da > 
诬 (入 ,0), 联 也 =DIAG CP 四, 则 请 为 nw 阶 正 交 阵 , 且 
triPA) =ir(P, A, +0) +e=tr(d), 
这 完成 了 引 理 的 归纳 证 明 . 
引 理 6.5.5, 设 五 在 为 了 上 防 对 角形 方 阵 , 0 二 万 < 了 为 正 
交 阵 ， 则 当 不 等 式 
NV OQ OE DV) OI- D0, (B57 
对 一 切 旭 成 立时 , 则 实际 上 对 一 切 旭 成 立 等 导 ， 
证 ， 在 6.5. 站 两 边 令 B30 得 出 坟 (G) 志 寻 (D3), 令 9 沿 各 
方向 趋 于 无 穷 , 不 难看 出 
QI- OID (5.5.8) 
记 D~=diag td, 7 dn), G = diag (gy J t= 的 第 二 行 ， 
oi TT— OO 和 于， 由 (5.5. 介 知 纤 忆 
圭一 国光 一 二 p， 由 假定 ，0 忆 Ql， 故 必 有 2 一 >w， 对 
t=， “0D 旦 若 
QI- D-DD ‘5.5.9) 
则 至 少 对 一 个 立 有 1 工 ->>ep 我 们 有 


< +2 6 
由 路 一 本 (一 人 3 一 十 ( 纹 ( 一 G)0) 一 三 FE 一 全 sm]， 以 及 
高 uit 一 荆 有 
> ~[G 一 G 训 = 识 人 -9 
破 


# SOd = 


罗 则 
pt- 
-jg -2 (5.5.10) 
但 易 见 = TW uN 
因而 @ 守 纳 《ff 一 从 ts 故 
3 gi D3 如 (人 一 的 的 一直 | (I @) we] 
~ (ID] ~- 字 (-g), 


这 与 全 .5.10) 结合 证 明了 祈 轨 < 六 地 再 由 前 面 已 证 的 tr(G?) < 
t(DD), 知 妇 (GY 一 臣 (D2)， 因 此 ,为 证 明 引 理 ,只 禹 证 @' 一 
人 D*Q~ (I 一 DD)?， 著 此 不 成 立 , 则 至 少 有 一 个 名 至 1di>o、 这 
时 , (5.5.10) 将 成 立 不 等 号 ,而 这 将 导致 如 中 < 襄 阁 , 与 上 面 得 出 
的 高 看 一 加 站 矛盾， 引 理 证 半 . 


(三 》 线性 估计 的 可 容许 性 

设 王 为 如 的 一 个 无 伪 估 计 , 且 VAR(T) oT 考虑 如 的 一 
切 形 如 上 了 的 估计 的 类 -经 , 此 处 工 为 常数 矩阵 ， 前面 我 们 定义 过 
在 全 .5. 分 和 全 .5. 且 意义 下 的 容许 性 ， 在 下 面 ， 容 许 性 都 是 指 局 
限于 类 名 而 言 , 换 句 话说 , 根本 不 考虑 .多 以 外 的 佑 计 . 

定理 5.5.1， 在 上述 假 定 下 有 

1° 下 及 把 天 对 称 , 日 其 特征 根 全 在 [0, 匡 内 ; 

2° LP 了 XO 2 SS8, 对 任何 号 (不 必 为 方 阵 ); 

8° SLY~SO EIS|¥0—> LY~6. 

证 ，1° 设 天 了 9， 作 了 工 -也 的 特征 分 解 ( 引 5.5.9) 2_ 工 


-POW, G = diag (yg, "yy gr 0, pp 们 ， >0, i=1, "ys 则 
由 


EOS w 


TE ET 


LY_8- (1-PGONT- 8 
= (IT— PGQN) CT 一 人 及 — PGQ'Y, 
知 { 利 用 BC(Y) = VARCP) =o27)， 
a = EELY—O' LF-] 
=0tr[ CT— GP) 0— PGON +O QQ'0. 
特 二 号 下 的 矩阵 屠 出 来 , 并 利用 公式 匡 (4 吾 ) -tCBA), 有 
tid QGP (IT— PGO)] 
= -2tr(GP'Q +tr(G” 


一 名 一 人 衬 mee+ 安 党 
此 处 % 为 如 的 维 数 ，mmi 为 方 标 瑟 和 的 仿 信 元， 又 记 有 -人 地， 
9)' 一 9, 则 
4(0) = mn) + 2mgt Dt. (5.5.11) 


由 也, @ 沸 为 正 交 阵 知 |m| 所 1， 如 了 XL0, 必须 有 mo 一 1. 
因为 不 然 的 话 , 收 忆 为 @, 以 上 =J-QG8 代 L=I-PGQ', 则 
上 了 将 优 于 LY, 而 与 YX 不合， 既然 mm 二 … 二 mm, 一 1 也 的 
前 ” 列 必须 与 人 @ 的 前 r 列 一 样 , 但 五 的 后 吕 一 ”~ 列 可 任 取 而 不 影 
响 荆 ， 故 可 取 之 使 与 @ 的 后 一 + 列 一 祥 , 即 P=- 有 @,， 这 时 上 = 了 
一 QGQ', 诉 碾 为 对 称 的 . 

既得 ma 一 … 一 mr= 二 由 个 .5.11)， 有 

da) =o | mn) + DD) | + 

由 此 及 已 知 的 事实 gy>0, 知 必 有 gs 所 1， 因 车 某 个 gy>1, 则 以 I 
代替 之 (这 意味 著 以 =I 一 86G8' 代 -I-QG@', 外 由 将 在 
中 的 大 于 1 的 gs 或 为 1 而 得 到 )， 将 得 男 一 个 亡 卫 其 20 的 下降 ， 
而 这 与 了 96 镍 盾 ， 由 了 一 ~ QG@' 及 @ 正 交 , 知 1-L 上 的 全 
部 特征 根 为 Wi ry Hr 0, ny 0, 而 LL 的 全 部 特征 根 为 工 一 网 ， ny 
1— gy, 1, yy 1, 全 在 00, 二 内 , 这 证 湖 了 1° 的 必要 性 部 分 . 

现 设 L~-QGO 且 0O& gl1, $= “rs , 此 处 和合 正 交 ， 而 

量 506 。 


diag (gs, …， go 0,…, 0)， 这 时 
dB) = BILY-0] =02tr[t(T— G7 +$'Gg, 

现 设 了 为 9 的 任 一 线性 估计 , 由 已 证 的 必要 性 部 分 , 不 妨 假定 
了 对称, 其 特征 根 都 在 加 , 忆 内 , 故 可 将 有 政 表 为 PC 一 DD) P' 的 
形状 ， 其 中 到 正 交 , 了 为 对 衣 阵 ，0<D<IT， 有 (注意 TT 一 于 
-= PDP'" 

du = EAMPF—0N = oo tr DNFOPYPG 

-or[(T~ 思 )]+$RD*R'G,R- QP 为 正 交 阵 . 
应 用 引 理 5.5.5 知 ,车 
du 他) 啼 虽 雪 ,对 一 切 0, 

则 必 有 dw ( 胁 一 人 (人 对 一 切 8， 因 而 及 YY 不 能 一 致 地 优 于 三 到 
这 证 明了 1° 的 充分 性 部 分 . 

为 了 证 明 2， 先 注意 下 面 的 事实 ， 为 要 五 是 89 的 可 容许 
估计 , 即 及 Y~S9, 五 必须 有 五 = S 吾 的 形状 ， 因 为 , 若 以 Ps 一 
SCS'S)-S' 记 往 .AS) 的 投影 算 子 , 则 


KY= PsRY- (I- 已 ) KY. 


IKYF-S OP-~| (PRY- SO + -PRY)? 
-ISCASD-SKT—A +{I— PYEYT: 
|S(SS) -SKF-—O P+- Py KY 

+2F'FK'(— PYS S'S) -SET—, 

注意 到 (一 Ps)S 一 0 ( 见 本 章 附 录 (3) 式 ), 车 记 

(S'S)-S'K= NM, 
则 由 上 式 得 
IKY— S9l*~ ISMY— S02+1 (I PYKYS, 

除非 及 有 五 的 形状 , 将 得 (~ Ps) 及 #0, 面 由 上 式 将 得 到 与 了 

一 致 地 优 于 五 也 故 欲 证 号 PP 了 SO， 只 需 全 任 一 个 SMY 与 之 

比较 ， 由 于 

ELISLY— S97 — BC YF-O S'S(LY-.0], 
EIISMYF— SO- EL(MYF—0)'S'S(MY 0)], 


rE A EE eh ta Bo a 


于 是 由 五 了 蕊 8 及 引 理 5.5.2 立 得 SLY~S9, 结论 3° 的 证 明 由 
2” 推出 , 因由 181#0 知 S-: 存在 , 故 
SLY CSO SS-:(SLY) SSS0) >LY ~0. 
定理 .5.1 证 毕 ， 
系 5.5.1, 若 B(CF) =6, VAR(T =0°D, [UI#0, LY 
8 的 充 要 条 件 为 ，(a) LU 对 称 、(b) 荆 的 特征 根 全 在 fo, 1] 内 ， 
证 , 取 Z 一 U2Y, $=UY9, 则 再 (2Z) = 加 VAR (2) 
=o?J， 于 是 出 定理 5.5.1, 
LYLOSLUNAZT UO -LU YZ ~ 
但 UV-3LUAZ 和 ~ 的 充分 必要 条 件 为 
(9) :D2L DM 对称， 
Qo)'U-2LUYs 的 特征 粮 全 在 [0, 了 内， 
显然 全 全 全 (Cb) 
定理 5.5.1 回答 了 人 本 呐 的 基于 其 无 俩 估计 了 的 线性 估计 ， 
在 一 切线 性 估计 类 (在 二 次 型 损失 之 下 ) 中 的 可 容许 性 ， 下 面 讨论 
6 的 线性 函数 的 估计 问题 . 
定理 5.5.2， 设 了 为 9 的 无 偏 佑 计 , VAR(F) =o2U, D>0. 
则 对 任何 常 向 是 pp， 9, 有 
gY poeg Ug<p Ug, (5.5.12) 
由 此 特别 有 p' 了 之 p'9. 
证 先 设 0 了 p90. 由 了 -p90-g (7_0)+9 (gq-p), 易 
见 
EL FT—pO0 = 00 Ug+ (9 —p)]’, (5B.5.18) 
取 1m=p+olg 一 p), 0<o<1 则 由 上 式 有 
BLGm PF pO ~ om Um [0' Cm—p)]? 
—os{(1—0)p Uptog Ug+20 (0)p' Ug} 
+00' (一 区 ]3 (5.5.14) 
二 后 和 各 二 


由 于 了 ~p'0, 由 此 式 知 必 有 
ggUe<dQ—opw Up+cg Uyt+2ct op' UG, 
将 oq' Ug 移 至 左边 , 先 设 6 志 1, 两 边 消去 1 一 6, 有 
d+oaDe<0—op' Up+2p Uy, 
星 式 对 一 切 0 和 ce<l 成 立 , 令 011, 有 g Ug<p UG， 这 证 明了 定 
理 的 必要 性 部 分 (注意 在 这 部 分 证 明 中 , | | 天 0 不 必要 )， 
充分 性 的 证 明 比 较 复 杂 ， 设 9 Ug<p'Ugq， 和 但 存在 p'8 的 估 
计 知 ' 工 ， 一 致 地 优 于 8 工 先 设 为 天 和 ， 必 有 但 一 名 一 0 一 证 ) 对 
某 个 常数 。， 因 为 不 然 的 话 , 将 存在 如, 致 典 巡 一 区 一 0 四 ( 琴 一 
各 到 0. 这 时 ,由 (56.65.19) 和 (5.5.14) 的 第 一 等 式 , 可 知 当 旭 ~ 下 从 
而 下 一 oo 时 ,将 有 EB[C9 一 p<BE 了 一 p80) 与 m' 了 了 
一 致 地 优 于 g' 了 了 东 盾 。 同样 性 质 的 推理 ( 令 o>0) 表明 : 在 表达 
式 扣 = 多 十 C 一 各 中 ,必须 有 |c| 所 1, 分 用 个 情况 考虑 : 
1? 0=1， 这 时 ?0 一 与 ?2' 了 一 致 优 于 了 荐 盾 ; 
2* |]c| 过 1， 我 们 来 证 明 , 有 
ovUo<d-oOpUp+oo'Ugt2(l -op' Ug, 
(5.5.15 
着 此 式 已 证 ， 则 在 (5.5.18) 与 (6.5.14) 中 令 rc? 一 cco， 将 得 到 与 
1' 了 一 致 优 于 妇 了 相 予 盾 的 结果 ， 
为 了 证 明 (6.5,1 闪 , 先 设 p Ug9>9 Uy， 这 时 , 由 不 等 式 
Cp' UP) a' Ug) > Cp" UgQ),, (6.5.16) 
知 有 PP'Up>p'Ug， 当 io| < 时 ， 有 
(d-op Up+og Ut dd—op' Ug 
> p Ugo-or Uog+2c0 0 p' Uo 
=-{1—o pp' Ug+owg Ug 
> Uetrog Ug- gy Ug, 
即 {6.5.1 罗 、， 车 p'DUg=9g Ug， 则 仍 有 Pp'Up>>p' Ug 一 9 Ug( 依 
6.5.160)， 尖 pp Up>p'Ug， 则 推理 与 上 上 面 一 样 ， 若 PUp== 
Pp Ug= Ug, 因而 履 .5.18) 中 将 成 立 等 导 。 由 于 UV>0, 这 只 有 


在 和 = 全 村 才 可 能 , 与 前 面 假 定 多 关 @ 矛 拓 . 
38° om= 一 1， 在 (5.5.15) 中 令 ojy 一 1 则 有 
gUg<dp' Up+o U9— dp Ug, 
在 (6.5.1 光 中 代入 e= 一 并 与 中 .5.1 比较 ， 知 8' 了 不 能 一 致 
优 于 gr 卫 未 盾 . 
最 后 , 假定 多 一 人 这 时 , 由 
EL(p'Y—p0 -op' Up, 
BI F— pO ~ om Um tO' (tm — pp)]? 
知 , 当 和 DP 时 , 必 能 找到 Bo, 致 [CP 了 一 p00 二 [On' 了 一 
P00) 眉 ， 定 理 证 毕 . 
定理 邱 .5.3， 设 王 为 8 的 无 偏 傅 计 ，VAR (了 了 ) -oU, U 


>0、 则 二 了 SO 的 充 要 条 忻 为 ，(a)LDS' 对 称 ， (b)LUL' 二 
LUS: 
证 . 先 考 辜 UU 了 的 情况 ， 
1 必要 性 ， 设 LY~S9、 我 们 来 征明 , 对 任何 ,有 
pLY~p'S6. (5.5.17) 
可 设 P¥%0. 车 纲 耶 一致 地 优 于 pLY、 找 方 阵 R, 致 如 让 一 和 
则 zm 了 一 p'RY, 这 时 
Elim pS ~ BIOp' (RP— SO 
«Bp (LY SO0), 
对 一 切 8, 且 不 敌 号 至 少 对 一 个 后 成 立 ， 记 五 ~pp', 则 上 式 可 写 
为 
HEIRY_ S9)'B(RY-SO)] 
<BL(ELY- SO'BLY- SO)], 


对 一 切 8， 且 不 等 号 对 8 一 96 成立， 这 表明 不 成 立 LF>S96， 但 


LY 入 S86, 此 与 引 理 5.5.2 矛 盾 因而 证 明了 (5.5.17), 由 (Lip)' 了 
~《S'p)'6, 应 用 定理 5.5.3 即 得 
piLp<p'LS'yp, 
B10. 


对 一 切 p, 从 而 LL'<LS', 这 证 明了 条 件 (3) 的 必要 性 ， 现 证 (@) 
的 必要 性 ， 设 (Q) 不 成 立 , 则 由 
BE[ILY- SO -oir (LL) +0 (8—L)'(S—L)0, 
(5.5.18) 
BUMY— S90 =otr (MM +9'(S— M)'(S— M9. 
(5.5.19) 
取 形 = 入 一 严 写 一 也 )， 王 为 一 待定 的 正 变 阵 , 则 
(SL)(S-D- (SS— MH- MM). 
又 tr MM =tr (S58) +trL(S—L) 0S 一 五 
-2tr[P(S— I)S. 
当 PJ 时 , 此 式 右 边 等 于 tCL0) (因此 时 用 = 品 , 当 LS' 不 对 
称 时 ，( 人 S 一 了 SS' 也 不 对 称 。 根据 引 理 5.5.4， 存 在 正 交 阵 如 致 
扩 [P(S— 世 SI]>trt(S 一 DSI， 对 由 这 个 吾 决 定 的 同 将 有 
术 CMMn <trCLLY， 于 是 由 (6.5.18) 和 (5.5.19) 将 有 
ELUMY—S0|"] <B[ILY- S61. 


对 一 殷 8, oa>0, 这 与 LY 入 59 矛盾 ， 因 而 证 明了 (四 的 必要 性 ， 
2 充分 性 ”为 确定 计 , 设 荆 的 行 数 不 超 过 其 列 数 ， 于 是 , 按 
特征 分 解 , 有 工 -_PGQ'，P 为 正 交 阵 , G 为 对 角 阵 ， 人 @@ 的 各 行 法 
正 交 ， 这 时 , 由 条 件 (b), 注意 LL'=PGP', LS' 一 PGQ'S', 有 
PPP'<PGOOS. 
由 此 可 知 GG@SP-=GT', T= P'SQ. 记 
_/G OV mw 1 有 有 
° 0 路 (z 7 )} 和 > 
易 见 GT' 对称， 此 因 
LS' 对称 沪 PGQ'S' 对 称 守 GOS'P 对 称 巧 GT' 对 称 . 
由 GT' 对 称 立 得 T=0， 又 易 见 Ti! 存在 ， 事 实 上 ， 由 GT' 之 


和 3? 知 rk Ty >rIk(G”) =rkeG). 但 er'-( Gi 0 ) 因 


0 0 
而 了 必 为 洪 秩 、 记 
。511 。 


A- THG, WG:~ TiA, 
则 易 见 臣 对 称 、 此 因 
部 T' 对 称 沪 人 了 廿 对 称 和 过 (TO TD TI 对 称 
2 对称 僵 且 对 称 . 


40 /An 
另外 , 易 见 c-z(3 0j-Pse(3 中 


wa (4 9- Pe) 0)-(T4 人 


最 后 ,得 
, moofA OV /A oO, 
L-PG@-PP'sQ( 0 o) -sa{ 0 0 jo -sm 


由 站 对称 知 用 对 称 , 易 见 于 >0， 为 此 只 和 需 证 有 4 产 人 0 此 因 GP 
0 因而 >0, 因而 TI >0 即 > 故 有 0 因此 豆 
一 切 特 征 根 非 钢 ， 另 一 方面 , 有 (注意 4'= 直 ) 

GT'>O DRT A>THOTT 44 

A 0 肥 虽 

mt Met oje<ete 0) 0- 
因而 推出 路 的 特征 根 不 超过 

根据 定理 5.5.1， 有形 了 6， 因而 SIMYLS6 好 LY 
号 6 这 证 明了 充分 性 部 分 ， 

现在 考 财 一 般 的 吕 >0. 令 ZU-AY, $29, 则 如 (2) 
= 内 VAR(GZJ) 一 or 又 

LY~SO => LU TLSUL, 
由 已 证 的 必要 性 部 分 (用 于 2)， 始 CLVUT (37 对称， 即 
LUS' 对 称 ,， 且 (LU) (LU WAY GLU (BUN Wp LUL 
翅 LDS'， 这 证 明了 定理 的 必要 性 部 分 反 过 米 , 设 定理 条 件 (a)， 
人) 成 立 , 则 有 
s51$ a 


Lvs SU 
即 也 了 Sb， 定 理 证 毕 . 


《四 ) 对 最 小 二 药 估 计 的 应 用 


在 本 跋 中 , 我们 利用 (三 ;的 结果 ,来 讨论 回归 系数 的 线性 估计 
在 钱 性 个 计 类 中 的 容许 性 癌 题 . 
投 有 线性 模型 下 = 瑟 BTeVAR(G coD UD 而 C8 可 
估 ， 我 们 先 证 明 , 在 二 次 型 损失 画 数 之 下 , 在 线性 估计 类 中 , 只 需 
考虑 形 如 型 兰 的 植 计 已 号 ， 此 处 府 为 后 的 GM 估计 ,如 
户主 :Uy 于: 
为 此 先 证 明 下 面 航 引 理 . 
引 理 攻 .5.6， 车 CB 可 佑 而 L 了 为 其 任 一 线性 居 计 ， 则 对 一 
切 如 有 
E{(LY-CA) (LY-CP)') 
>E{(LAS-CAB (LIB-CAY (5.6.20) 
注意 由 于 人 可 以 不 止 一 行 ， 上 式 是 “ 差 为 半 正 定 " 这 个 意义 下 的 和 矩 
阵 不 等 式 . 
证 由 LY-C8= (LF 了 -LXA)+ (LXB-CB), 易 见 
E{(LY-—CB) (LY—CB)'} 
~ HE{(LY- -LIALY_ LEB)') 
+ ELULXS-CA (LIB-CA)') 
+ ELCLY-LAA) (LES.-CA)')} 
+E{(LES-CA (LY LXA)'). (65.5.21) 
签证 人 6.5.20)， 只 逢 证 5.5,21) 右边 最 后 两 项 为 0” 注 意 到 
(LY) -LXB,， (LEX) -LXB (四 互 启 为 可 佑 函数 下 G 的 
QM 估计 ), 有 
BLLY—LXA (LXE -0A)] 
= hIEYF- LEAS ERD) 
~LEL(Y-EBEB)X'L. (5.5.29) 


由 于 政 记 为 下 8 的 GM 估计 ,而 GM 估计 有 了 唯一 性 , 黑 序 与 序 的 
取 法 无 关 ， 我 们 选取 
B= (ED)+E'U YY, 
利用 公式 ( 见 本 章 附 录 ( 少 式 》 
下 一 下 (下 :本 下)- 素 '7-1 下 [对 (下 "7 于 至)- 的 任何 二 法 ). 
有 ps dd dd nak 
一 [FT— (UR)+EU TA), 
于 是 得 到 
ELCY— XB BI = [I— X(TULE)+T UY 
xXVARCTY [UT AOR'DU TE}!] 
=0°[T 一 于 (于 'D!1 革 y+ 尼 'U UU iA D iE +] 
kr i 
x(t 让 ' 人 UU 和} =0, 
由 代 ..22) 知 (56.5,21) 右边 第 三 项 为 0， 而 第 四 项 为 第 三 项 的 转 
置 , 故 也 为 0 这 证 明了 (5.5.20)。 引 理 证 毕 ， 
定理 已 .5.4， 在 引 理 5.5.6 的 条 件 下 , 有 
ELI(LYF—_ CA GEY_ CCA] 
> EI[(LXS-CA'GLIS- CA)], 
对 性 何 所 ,此 处 安 为 任何 半 正 定 或 正定 方 阵 . 
证 . 记 B[CLY~CA (二 了 CCB) A, BEITLXE-CA) 
x {LXB-CB)'] -BC(A, 昌都 与 8,o 有 关 )， 则 有 
ELCLY_CAB'GELYF-CA) 
OR A a 
-iGECULF-_CA LPF-CAN] = 04), 
河 理 , BL(LXEB—CAY'GLEE-CA] -t(D). 
EL(LY—CA'GELY-CA] 
— EL(LXYB-CA'G(LIE- CA)] 
=tr[G(A—B)]. 
由 司 再 5.5,6 知 妥 一 召 >0， 放 本 定理 的 证 明 归 结 为 下 述 事 实 的 
证 明 ， . 


+ 


G0 D> GD >0, 

这 是 很 显 热 的 , 因 红 (GD = (WG2D)=-tr(2DG/), 而 
GPa 定理 证 些 . 

利用 这 个 定理 不 难 加 答 我 们 在 本 节 ( 二 ) 开 始 处 提出 的 那个 问 
题 , 即 在 线性 估计 类 中 IS 悄 计 能 符 改 善 的 问题 ， 

定理 上 .65.5 设 有 线性 模型 了 一 下 有 Te，VYARIe = oD 
>9 已 知 ,CB 可 居 (C 可 以 多 于 一 行 )， 记 为 8B 的 GM 估计 , 则 对 
任何 五 >0, 在 线性 估计 类 中 有 CB~CB. 

证 ， 先 考 虚 户 可 佑 的 情况 ， 有 瑟 ( 人 B=, 而 VAR ( 导 
一 02( 居 -1 太 Y-，( 玉 '0U-1 了 -1>0， 于 是 优 系 5.5,1, 在 局 的 
一 切 形 如 下 育 的 人 告 计 类 洲 中 , 及, 由 引 于 5.5.2 得 让 ~~B. 
但 根据 定理 5.5.4 在 二 次 型 损失 之 下 , 在 一 切线 性 合计 工 了 的 类 
& 中, 只 需 考虑 风 郑 一 部 分 已 是 ， 因 此 由 多 B 于 扩 内 ,得 人 BB 
于 8 内， 再 由 定理 5.5.2, 2*, 即 得 C 久 之 CB 对 任何 人 

对 一 般 情况 ,可 以 适当 地 选择 参数 a, 将 模型 改写 为 入 = 全 @ 
十 e, 使 w 在 这 模型 中 可 估 . 由 于 C8 在 模型 王 一 下 有 2e 中 可 估 ， 
(8 可 襄 为 人 Ba 的 形状 , 县 显然 C 记 Ca 人 @ 为 q 的 GM 估计 ), 于 
是 由 定理 已 证 部 分 , 立即 得 到 C 训 ~CB， 定 理 证 半 . 

由 这 沾 定理 可 知 , 想 在 线性 估计 范围 内 改善 LS 估计 (或 一 般 
地 ,GM 估计 )， 必 然 是 徒劳 的 。 但 应 注意 , 这 里 的 “改善 "是 ”一致 
优 于 "的 意思 ， 也 可 以 存在 另外 的 五 江 C， 政 序 之 CR， 这 时 ，C 序 
和 五音 的 优先 就 不 能 截然 区 分 ， 因 此 设 CB 为 可 知 函 数 ， 我 们 
对 一 切 满足 条 件 上 了 CB 的 估计 关税 兴趣 ， 下 面 的 定理 完全 国 
管 了 这 个 问题 . 

定理 5.5.6、 在 定理 5.5.5 的 条 件 下 ,LY~CB 的 充 要 条 件 
基 

ie .KE ) 王 . (到 ) (这 等 于 说 ， 存 在 矩阵 号 ， 致 UL'~ 
了 


-Bl5. 


te eh re ere 


2? 瑟 芭 人 -COC' 对 称 ，T 了 一 下 'U1; 
8° LET-AELELETO 
注 ， 定 理 中 的 条 件 实 际 上 与 了 的 选择 无 关 ， 因 若 至 满 秩 ， 
则 互 'E 六 : 王 满 秩 而 全- 唯一 .车 芷 不满 秩 ， 和 由 CB8 可 舍 知 局 = 
五 下 , 再 注意 下 全 下! 与 中 - 的 选择 无 关 即 得 
定理 的 证 明 . 不 失 普 道 性 可 设 召 = 工 
必要 性 ， 在 避 理 5.5.6 证 明 过 程 中 已 得 出 
息 =B[CLF-_CA EF—CA)N 
= EI(LEG-CB) (LXS CA) 
+EIELYF_ LX LPF- LX-=B+O. 
此 处 C*>>0， 必 有 CC 一 0.。， 因 车 C* 关 则 
EDLYF—CBIY] = 三 (4) -tr(B) +tr(C") 
-BILXB-CBIY]+tr(C"). 


着 C 关 0， 则 由 CD 知 记 (C>>0， 这 与 亏 了 LOCB 了 矛 后， 以 
店 一 和 -五 :7 玉民 入 玫 " 的 表达 式 , 易 见 
人 "一 (LUO-LET_XYU2LU— LAT-E)'. 

由 于 了 >0, 从 C*=0 得 上 U0 一 上 于 了- 生 '， 这 证 明了 条 忻 1° 的 
必要 性 ， 

定义 他 =UW 了 并 记 (人 B=0-B-0, 有 VAR(?) 
一 a 呈 ， 因 为 CB 可 估 ， 存 在 人 G， 玛 C-G,， 故 C8- GXB- 
GT-TB( 因 及 = 太 T-TY, 即 

CCB- GET-E'U- UB So, S= GET-E'U™. 
而 DY-MY，M=LU'2， 由 LYLCB 知 族人 上 SG， 由 定理 
6.6.8 知 于 SS 对称 , 即 
MS' = 万 ( 下 下- 五) 本: 一 开 下 下 -Cr 对 称 ， 
这 证 明了 条 件 2° 的 必要 性 .， 同 入， 由 定理 5.56.8, 有 MM'< 
MS', 即 LUD <<LYT-C'， 我 们 来 证 明 ; 
LUL -~LET-X'L, (65.5.28) 

证 明了 这 个 等 式 就 证 明了 条 件 3° 的 必要 性 . 
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由 LU=LXT- -R'mL~=-LAT- XU-DX'D!, 有 
LUDL= DYEU UD ED = DXAUSAD'— DTD, 
LXYT- XE DRE'U XT RU IAD 
=DTT- TD DTD,, 
因而 证 明了 届 .5.2 纺 , 从 此 得 到 定理 5.5.5 的 必要 性 . 
充分 性 、， 有 性, 写 , S, 68 的 意义 同上 ，B (了) -94, VAR(?) = 
oT, CB=S8， 由 条 件 2° 知 型 SS 对称 ， 由 条 件 1° 知 存在 五 至 
上 LDX'Ui， 这 与 条 件 8° 结合 得 了 MM' 二 HS'， 于 是 由 定型 
5.5.8 知 人 SO 好 LY 了 XCB， 定 理 证 弟 . 
个 难 验 证 , 定理 5.5.5 可 以 由 定理 58.5.6 推出 。 这 个 留 给 读 
者 作为 练习 . 
§5.6. 大 样本 理论 
(一 ) 问题 提 法 
到 目前 为 止 , 我 们 考虑 线性 神 型 了 = 下 8-++e,， 了 和 8B 的 维 数 
分 别 为 和 和， 这 意味 着 试验 次 数 台 已 取 定 ， 不 再 变化 ， 现 在 设 
起 我 们 选 定 了 无 限 个 试验 点 mi， 地， ……， 其 中 
Wi Rl Wp 一 2， (5.6.1) 
在 点 试验 结果 ， 因 变量 取信 为 了 i=1, 2 …， 王 是 我 们 得 到 
了 一 提请 十 ai t=1, 2, ~, nn, (56.6.2) 
这 里 {eg 为 随机 误差 序列 , 总 假定 及 (6j) =0 对 一 切 纪 其它 假定 视 
需要 而 定 ( 攻 (60 一 0 一 点 以 下 不 再 提 到 )， 
自然 ， 在 与 .6. 了 中 试验 总 尺 能 作 有 限 次 。 设 作 到 第 n 次 为 
生 , 就 得 出 一 个 在 前 几 节 中 考 碟 的 有 限 线性 模型 ; 
Tn) = £8+e tn). 
其 中 四。 一 (和 do 星人) 一 《Fe 一 《en 
ta 假定 六, 一 下 ,下 满 匆 , 可 求 得 B 的 LS 佑 计 ， 


"S17. 


BO =- (Bi, 7 B'S FD). (5.6.3) 

又 在 再 (eeh 一 Bo (8 一 1 当 5 一 j， 一 0 当 1* 站 的 假定 下 可 求 得 
g? 的 估计 为 

A A (5.6.4) 


当 % 增加 时 , 形成 和 0 的 一 个 估计 序列 {人 (WO)} 及 {37 
大 样本 理论 就 是 考察 当 m->oc 时 , 这 估计 序列 的 极限 性 质 , 最 主要 
的 是 相合 性 和 渐 近 正 态 性 , 我们 将 看 到 , 这 些 性 质 与 试验 点 列 {%} 
及 随机 误差 序列 {ei} 的 性 质 有 关 ， 这 个 问题 不 仅 在 纯 理 论 的 意 
义 上 很 有 兴趣 , 而 且 有 一 定 的 实用 价值 。 因 为 ， 在 6 不 服从 正 态 
分 布 时 , 对 有 限 的 % 户 (n) 和 四 (nm) 的 分 布 无 从 求 得 , 这 时 在 5.8 
中 讲述 的 关于 户 和 oa? 的 假设 检验 及 区 间 估计 等 就 不 再 适用 ， 大 
样本 理论 在 很 大 时 , 提供 这 些 问题 的 一 个 斯 近 解 法 ， 

线性 模型 的 大 样本 理论 开始 于 六 十 年 代 ， 到 现在 为 止 已 获得 
不 少 结果 , 但 也 还 存在 一 些 有 兴趣 的 悬而未决 的 问题 。 由 于 篇 幅 
的 最 制 , 在 本 节 中 我 们 只 能 将 主要 结果 作 一 个 介绍 ,而 不 能 涉及 这 
些 结果 的 全 部 证 明 . 


(二 ) 房 (四 的 弱 相 合 性 


如 果 当 兄 ->ce 时 , 启 Gw) 依 概率 收 合 于 B8, 则 称 序 (oo 为 有 @ 的 弱 
相合 悄 计 .在 本 段 中 假定 
Erte ~’?, Elee) =03irj $s jl, 2 .6 
定理 右 .6.1， 如 果 全 .6. 蕊 成立， 风 碾 四 为 如 的 弱 相 全 估计 
的 充 要 条 件 为 
Im Sr=-0 | (5.6.6) 


Ri 


《此 处 假定 了 当 5 充分 大 时 S77! 存在 ， 又 一 些 阵 赵 于 0 是 指 它 的 
每 一 元 都 趋 于 从. 

。 本 定理 的 充分 性 部 分 是 Hioker 在 1963 年 证 明 的 , 它 是 VAR 
GD) 一 oaS5( 见 二 .2.9)) 的 一 个 简单 推论 , 事实 上 ,因为 户 () 
为 有 的 无 偏 估 计 , 有 


上 1 六 


BUA ~BIY ~ ottr(S D0, 当 m>co， (6.6. 作 
由 此 立即 推出 请 是 弱 相 合 的 . 


必要 性 的 部 分 是 Drygas 和 本 书 作 者 先后 独立 作出 药 ， 以 下 
的 证 明 据 <* 科 学 通报 >，1978 年 第 8 期 ， 令 


A、 AB (ne) TA 
Bw=I : 上 gi"=| : |. 
局 (9 jm 


设 (6.6.6) 不 成 立 , 由 于 S71>0, 其 主 对 角 线 上 某 元 , 不 失 普 遍 性 
设 为 其 (DL 了 元 6 当知 co 时 不 趋 于 0 册 于 ww 非 增 ， 有 limo, 
一 0 

现在 证 明 Bm) —B= 2 As 其 中 

2 — Do — Saws ,Ao — (en — Srna) 
事实 上 , 由 5, 的 分 块 形式 , 用 引 理 5.4.1, 有 
-1 = (~ 一 2 一 SinS1an( Saon 一 SIL San) 1 | 


和 


可 知 。 ln) -pm 


一 可 Sn C90n — BI Sn) 10. 
上 式 右 边 第 二 项 分 子 俘 母 同 莱 Ss 一 访 1smn9z2.Sm, 注意 
~— Bi na.) So (aon — SI Snon) 1 
= ST — SS SN) COs — Si S90) + 
= Sn — SI S32. SS ) 
x [Saon ~— SS zn) 1 
w= SnS 2,, 


各 


S190. 


且 
4 一 立 2 和 一 SS 会 sn 二 Siin 一 1 


这 证 明了 Bf) 一 怒 一 2,/As。 易 见 蝇 (2) =0，Var(2Z = 
记 区 14 一 Sn RE 一 六 则 


一 训 be， 4 一 六 局 一 ert. 
不 难看 到 , 当 ?>> 丘 时 有 入 胞 > 如 后。 这 是 因为 ， 
> 
为 gp 在 999，…，99? 所 张 成 的 线性 子 空间 .NH 上 的 投影 , 而 
Si = jg wl ww EA 
对 每 个 固定 的 乌 序列 {hn 是 有 界 的, 用 标准 的 对 角 线 方法 ， 
可 选 出 自然 数 子 序列 fr}， 致 lohwos 一 do 一 1，2，… 在 关系 式 
训 研 > 妆 旋 , 中 令 m>o0, 得 
» 1 1 , 
a 
此 式 结合 六 及 一 4/6 即 知 加 纹 1/o， 为 简单 计 , 记 hs 一 
考察 序列 
BBlm) Bon Sfien j=1, 2 (6.6.8) 
现 证 对 任 给 。>0 存在 5 及 jo, 使 当 j>jo 时 ， 


< (5.6.9) 
为 此 注意 ,总 太 ~- 关 及 一 产 及 


-去 - 辫 及 < 到 -六 及. 
选 5 充分 大 , 致 噶 ++… 十 中 > 地 一 名， 然后 找 训 充分 大 ,使 当 j 这 
入 时 有 为 把 > 高 轨 一 号， 这 时 当 j> 知 有 


0 


1 eV 1 en ee 
, 属 记 < 二 人 ( 疡 姓 -过 一 二 -站 全 计 <。 
这 证 明了 {56.6.9). 现在 可 证 : 当 人 >co 时 ， 
E[(2,— 六 do) ] -0. (5.6.10) 


此 处 总 dsr 理解 为 全 det 的 均 方 收敛 的 极限 .事实 上 ， 
a [2 eBan) |~ [Zodae) J De 

十 a uw<3p[( ou fnes—0 D3 der) ] 

+3090” 六 六 十 300 基因 +o 袜 本 


找 加 和 知 致 8o8o 包扎 < 本 ， 当 了 > 加 


找 球 基因, 至 Beg > di 子 ， 
找 永 产 训 ,至 < 
drt1 


固定 5 找 关 2 之 生 使 当 j>Fs 时 ， 
3 [(e.S 了 He 一 ~ die) ] Bec? So, —d) 2 
二 6 (pw 一 全 2 和 < 工 ， 
这 样 我 们 证 明了 ; 当 了 > 入 时 ， 了 (入 一 * 局 ee ) ]<e 这 证 明了 
二 .6.10)、 由 于 e 习 wu 不 以 概率 为 工 等 于 0 由 (5.6.8) 徊 


房 (由 当 广 *co 时 不 恢 先 率 收 伍 于 局 ， 这 证 明了 条 件 (5.6.6) 的 必 
变性 , 定理 证 毕 ， 由 这 个 定理 特别 知道 ， LS 估计 的 田 收 敏 性 与 均 
方 收 伍 性 是 等 价 的 ， 

容易 看 出 , 存在 这 样 的 情况 : 其 中 LS 估计 序列 { 语 (四 } 不 为 有 
的 也 相合 估计 , 但 可 以 找到 尽 的 一 趾 线 性 估计 {4sFtm} 是 如 的 


* S31» 


弱 相 合 估计 ， 例 如 , 取 2= 1(8 为 一 维 的 ), 一 子 ,4 一 1， 2 “又 
EL。 C2 … 独 立 ， 如 的 分 布 为 


P,(e, = = Ps (ei— — -2 P, (em0) =1—o/%, 


1 一 1 2 而 0<o2<1。 由 定理 了 知 有 的 IS 估计 不 为 弱 相 合 ， 
但 车 取 8 的 一 串 估 计 { 蕊 ZJ， 则 不 难 见 到 它 为 有 的 弱 相 合 估 计 . 
在 此 何 中 , ea，ea， … 的 分 布 不 同 。 本 书 作者 举 出 了 这 样 的 例子 , 其 
中 0} 同 分 布 且 满 足 收 .6. 钻 ,但 8 的 I 估计 不 为 弱 相 合 , 而 其 某 
个 线性 估计 为 弱 相 合 ， 在 {oj 为 独立 同 分 布 时 这 种 例子 不 存在 ， 
网 作者 文章 .数学 年 刊 1981 年 1 期 ,P.131. 


(三 ) 语 (Go 的 强 相合 性 

定理 5,5.2. 设 ei ,2e2 pm 汶 iid : Eel =0, Varl el)< oo0, 且 条 忻 
(5.6.6) 成 立 , 则 PP(fixbop(n)= 有 AP)=1. 

这 个 重要 结果 是 工 , 工 ,Lai( 黎 子 良 ) 等 1979 年 得 到 的 ( 见 J. 


Multi ,Anal .1979, 己 .343) ,证 胃 很 长 ,此 处 只 证 明 = 为 正 态 的 特 . 


例 ,这 是 Anderson 等 1976 年 得 出 的 , 取 衣 来 考虑 .沿用 上 段 的 记 
号 ,存在 充分 大 的 9 致 A, >0 定义 

= A 1 Aisa iO—Atre_a, 2 

Di afr WU= (Hira ti— Zire 2) /Te di2, 
考 熙 Zar 一 和 Zs 十 (Sn9 动 一 司 %,n419 芝 mr) 总 个 
十 (x, 4 一 Ss, nl) 和 (en = Tn Tan 了 an。 
车 i 时 ， 了 与 2 不 相关 . 此 天 ElZs) 一 心 而 
Bls) — (SumSa — Sn, nSBnn) 疡 

X (tn Si 2 a = 0, 
义 显 然 有 轧 (2;1ss) mw0。， 由 正 态 性 假定 知 Zs4i1 一 Zr 上 与 22: 独立 ， 
当 4， 出 瑟 可 知 v9; ** 独立 ， wm 丰 和 co， 其 中 Var (Cun) 


= 22+ 


a 


~ 


-or 是 由 公式 
(i 一 Si, rr) > Lp 
X CIS — Sg, 08) 
Tb 
推 由 ， 由 于 “ 癌 本 -4 一 由 (ee 一 SS 二 of 


队 才 达 式 。 包罗 一 于 ro/ 癌 伟 
根据 KomxoropoB 定理 ( 见 [8],p, 238，4), 要 证 明 1lim (mn) = 
e.， 只 需 证 明 lim 名 让 一 o0, 以 及 
Er rit tr eo. 
前 一 事实 由 (5.6.6) 得 出 ， 后 一 点 可 证 明 如 下 ， 记 B= 十 *… 
+9% 则 (Bo 一 0) 
号 /tt 
工 aw 
< 两 二 乌 Bp Wo 
定理 证 毕 . 
如 果 只 假定 百 (eeyj) Be, 则 为 要 证 明 (nm) 的 强 相合 性 , 条 
件 (65.6.6) 要 加 强 ， 本 书 作者 证 明了 ， 条 件 S71 一 OC(log 1 -*) 
(对 基 个 e>0) 是 充分 的 .可 以 证 明 ,指数 2+ e 不 能 改善 为 2. 
以 上 的 讨论 总 假定 “ 药 二 阶 矩 存在 有 限 ， 如 果 只 假定 4 的 
r 阶 矩 存 在 有 限 (LSr<2)， 有 关 6(za ) 的 强 . 弱 和 r 阶 平均 相合 
的 问题 也 有 了 完满 的 解决, 细节 不 在 这 里 介绍 了 . 


《四 ) 这 (0) 的 相合 性 
如 果 eu 69,… 过 ， 且 ~ 邓 (0, 0 中， 出 由 下 .6. 久 所 确定 的 


ss 


ee 


人 2 为 o 的 弱 相合 估计。 这 一 点 很 容易 证 明 ， 因 为 在 正 态 性 候 
定 下 , 由 定理 5.2.6 知 , @ 一 中 信人) /a? 服从 分 布 居 -因此 ?7(@m) 
028/ (9 一 翅 ， 依 类 分 布 性 质 加 [5?()] 一 于 全 一 芒 / 人 一 功 
一 0 而 Varfis 的 ] 一 5 2 人 一 区 一 0 当 mr>co。 这 还 明了 
lm ia 人 二 oa. 

由 本 书 作者 证 明 的 下 述 结果 解决 了 在 误差 独立 时 ,6 的 级 
相合 问题 . 

定理 5.6.8。 设 me%… 相 互 独立 ， 各 有 均值 0 方 闫 9， 又 
ox 的 分 布 函数 记 为 Fz， 则 G2(9 为 0? 的 弱 相 合 估计 的 充 要 条 件 
为 


im 二 袜 f sdFr—0, (5.6.11) 
Mr Kemi Isl 
im 三 局 | aidPr=0 (5.6.12) 
ne el gv 


证 .在 公式 
0) -a PO)' [DS XY YO) 
中 ,以 了 了 (W) 一 夷 户 (n) He 人 代入 ,得 


PFe hI Aen) 
-0 


其 中 一 S57 于 ,因而 Ur 一 了， 由 此 推出 
E [a | Ue (rn) -#0 3 Roo0., 


这 汪 明 了 lim 二 | De Go 站 二 9。 因此，6* 人 ) 的 弱 收 伍 性 等 
价 于 
im 二 袜 地-o9 之 0 (5.6.13) 


由 古典 大 数 定 律 ( 见 [9]，p. 278)，(5.6.13) 等 价 于 
. 2 


lim »: dP (x) =0, (6.6.14) 


KE=1 pl VNTR 


(anadpPi(s) 0, (5.6.165) 


2 | 
ne FE | Voto 


lim 二 > pa (oPr (办 一 0 (5.6.16) 


Re I ntos 


现在 证 明 这 三 个 条 件 与 .5.6.11) 和 (5.6.12) 等 价 ， 先 变 后 者 成 
立 . 由 目 .6.1 了 DD 知 lim > Fe 一 0, 册 此 推出 (5.6.14)， 由 


oa KE Fl 

于 再 (er) 一 Varter) = (5.6,1D) 等 价 于 
:1 

lim 2 


而 此 由 司 .6.11) 推 出 ， 答 证 后 .6.16), 只 需 证 明 


wd 一 0， (5.6.17) 


| 1 
lim 一 - 
用 na ml |< Rt 


viatr=0. (5B .8.18) 


以 m 记 不 小 于 aoa 的 最 小 整数 ， 则 上 式 极 限 号 下 的 量 不 超过 

( 宇 ) 古色 f m4Pg 依 (5.6.12) 当 mn->oo 时 , 它 有 极限 0. 
现 设 (5.6.1 信 一 (5.6,16) 成 立 ， 记 各 = 名 一 oj]， 即 不 超过 

% 一 o 的 最 大 整数 ， 由 (5.6.1 和 和 (5.6.15) 推出 65.6.17， 所 以 


， 只 1 于 一 芒 
一 一 Fr= 人 0 5B.6.19 
lim 丙 各 | wadFr—0. ( ) 


此 人 外 无 为 一 不 超过 中 十 1 的 整数 , 因此 当 wm>ooc 时 ， 
1 
得 ERE+1 
由 二 .6.19) 和 (5.6.20) 推出 (65.6.11)， 最 后 ， 由 个 .6.16) 推出 
(5.6.18) 因而 (5.6.12)， 定 理 证 明了 ， 
这 个 定理 值得 注意 的 地 方 是 闻 (m) 的 绊 相 合 性 不 对 试验 点 列 
提出 任何 要 求 , 这 与 (nm) 的 世相 合 性 条 件 形 成 鲜明 的 对 早 . 
系 5.8.1. 车 eea … 枯 互 独立 旦 (en 一 0 Var(en 一 03, a 
的 分 布 为 ml 3 9 而 区 小 满足 条 忻 


| dpe ti + ay0 (5.6.20) 
Iml 


= S25 e 


lim sup 1 War | 一 心 (5.6.21) 


则 前 (60) 为 o3 的 弱 相 合 估 计 . 

只 需 验 证 ， 由 (5.6. 氏 ) 推 出 (5.6.11) 和 (5.5.12)， 我 们 把 这 
项 容易 的 工作 留 给 读者 ， 

与 估计 后 一 样 ， 可 以 提出 名 他 的 强 相合 性 问题 . 关于 这 个 
问题 , Gleser 证 明 ( 见 Ann. Math. Sfatist,, 1986,，p,, 1053)， 若 人 
ez)" 为 iid., 吾 (6e) 一 0，Varte) =a3， 则 P lim HR) = 0) 一 工 


本 书 作 者 与 赵 林 城 同 志 研 究 了 当 随 机 误差 各，ea，…… 相互 独 
立 , 满足 条 件 
Ele) ~=0, Varfen <0’, 看 一 二 2， (5.6.22) 
但 es ~… 不 恤 司 分 布 的 情况 ,得 到 了 在 这 个 情况 下 , 外 (区 为 0 
的 强 相合 估计 的 充分 必要 条 件 ， 有 趣 的 是 ， 与 定理 5.6.8 一 样 ， 
所 得 的 条 件 也 只 与 es, … 的 分 布 有 美 ， 而 与 试验 点 列 fj 无 
关 . 


《五 ) 启 Coz) 的 渐 近 正太 性 


关于 这 方面 ， 系 统 的 工作 是 Bieker 作 的 , 是 独立 和 中 心 极限 
定理 的 直接 应 用 .关于 Bicker 的 工作 , 较 集 中 地 介绍 于 他 省 忆 在 
Procoeedinga of Fifth Berkeley Bymposium, Vol. 上 发 表 的 文 
章 . 我 们 只 证 明 下 述 结 果 , 对 其 它 绪 果 不 加 证 明 地 介绍 一 下 . 

定理 器.6.&.。 设 ay ea … 独 立 , 再 (eD) = 0， Varfo0 一 of, ea 的 
分 布 为 了 ,%=1,， 2,'， 叉 记 后 ?5 六 为 的 (6 前 元 ,snaf 为 
SS, 脏 和 的 (人 让 元 ， 很 定 

1 lim [max wu/ 6, )] ~0, (5.6.23) 


2 条 件 人 .6.217 成 立 ， 
3° inf os>0. 


记 BB% - 站 wurci 则 当 meo 时 ， 


和 


(Bn) — BY IB SN C0, 1). 


证 . 由 条 忻 2 易 知 sup 0s<<%%， 记 革 ,x 一 互 一 1 


“ 9, 则 ElXnE) 一 小 Var (Xan) =1, 而 让 EF 的 分 布 为 


Bom、， ，. 
Gur 人 = Fr ), EKE=1 ,nn 
所 以 
了 | jg a =- 忆 2 (Ba aancry》 


lw 


一 1 2 
兵 =1 Bu lol > Ba lintr 


由 条 件 1°, 2%, 知 当 m%>ce 时 ,对 区 一 1,，…, n 一致 地 有 


Hm | wadPi (wo) = 0. 
H+ lt nt 


于 是 由 (5.6.24) 得 ， 
lim 他 mdr =0, 


对 任何 ”>>0， 依 方差 有 腿 时 的 中 心 极限 定理 ( 见 [8], p. 295) , 立 
即 得 到 所 要 证 的 结论 。 
这 个 定理 处 理 的 是 应 Go 的 一 个 分 量 的 情况 、 关 于 应 (mw) 本 身 
的 (多 维 ) 浙 近 正 态 性 ， 也 不 难 类 似 地 加 以 处 理 ， Jicker 证 明了 ， 
车 以 再 , 记 正 定 方 阵 Br18diag (co3，…, oD 于 Sr1 的 正定 平方 
根 , 假定 定理 5.6.4 的 条 件 2°,3° 成 立 , 以 及 
lim Tmax 1 一 帆 


卫 -*om 工 号 


则 当 加 >co 时 ,有 
RB (n -BSNOO, DD). 
这 些 结果 还 不 能 直接 用 于 B 的 统计 推断 问题 , 因为 ， 此 处 的 
R, 和 前 面 的 Bo。 都 依赖 于 未 知 参 数 3 o8 …。 如 果 假定 呈 - 
3 一 … 一 0 则 起 ,和 Bw 只 依赖 于 一 个 未 知 参 数 v2, 而 oz 可 以 用 
其 情 计 全 办 来 代 装 。 若 不 假定 号 嘻 … 都 相同 ， 则 Jioker 证 


"ST» 


sy (Cm). (6B.6.24) 


a 


明了 ; 车 算 出 殊 差 _ 
6 = (GD), ,BD))' = YW) — SAP WD, 

则 当 以 时 ( 罗 代 替 BB 和 Bu 中 的 中 时 ,上 面 提 到 的 遍 (w) 和 (mn) 
的 渐 近 正 态 性 仍 有 效 ， 经 过 这 种 代替 后 , 所 得 结果 可 在 甚大 面 
误差 @， ea， … 不 必 服 从 正太 分布 时 ， 用 来 作出 及 的 近似 区 间 知 
计 , 检验 有 关 6 的 线性 假设 等 . 

对 方差 o? (假定 er sy … 有 等 方差 }， 本 书 作 者 得 出 了 类 做 
的 结果 . 


附录 关于 和 矩阵 的 广义 逆 


在 本 章 中 应 用 了 关于 和 邱 阵 广义 道 的 某 些 知识 ， 考 弄 到 广义 道 这 个 内 容 
现时 还 没有 成 为 大 学 线 代 表 基 础 课程 中 必然 包含 的 部 分 ,为 了 方便 读者 。 将 
本 章 所 用 到 的 这 方面 的 知识 篇 写成 这 个 附录 ， 以 供 参考 。 由 于 篇 幅 的 限制 
我 们 将 基本 上 限于 本 章 引 用 的 结果 . 

作者 在 编写 这 个 内 容 时 ,使 用 了 张 络 庭 同 志 所 写 的 一 份 有 关 材 料 , 

4， 广 义 弟 是- 的 定义 及 存在 性 和 矩阵 互 称 为 短 阵 4 辫 广义 道 并 记 为 
B= 和 4-, 若 

ABA=A, OY 
注 竟 在 此 定义 中 并 未 要求 站 为 方 隆 ， 显 然 , 车 夺 为 坟 xX# 算 阵 ， 出 及- 必 为 
nx 和 m 矩 妊 入 显然 , 若 为 方 阵 且 4 1 存在, 则 .44 存在 唯一 且 即 为 用 -. 

首先 磁 到 的 一 个 问题 是 妈 - 的 存在 性 下面 的 定理 趟 芭 回 答 了 这 个 问 
题 , 还 指出 了 年 药 一 般 形 状 . 

定理 41. 对 任何 看, 4- 必 存 在 。 且 若 

ECAd 站 =P rm 0 
rE(A) +, A (6 0)® 
P,Q 为 满 秩 方 阵 LI 为 + 阶 单位 阵 ), 则 三 - 的 一 般 形 涛 为 
_ Le 
-os SO) 
这 里 局 DD, EE 可 以 任意 (当然 , CD,B 的 大 小 与 要 ' 的 表达 式 中 的 ( 人 0) 
中 相应 块 的 大 小 一 样 )。 
* 56538. 


证 ， 由 于 东 (4) = *， 依 矩阵 论 中 导 知 的 定理 ， 存 在 请 秩 方 阵 恕 Q, 至 


-1 oja 故 
用 0 

I. i. 0 I. 0 

4~4aaePfrg 0 ) -P(t ojasrf 5 oa 
ee 人 (5 5- 人 ? )oae( 5 9) 
0 9 LL 0 oF 
F! 五 > 

i oop-( 六 ) 得 


1, 0 I OF FMI, OY /F 0 
A440( 0 0)-( 0 0 A 人 0 0 }-(% 0) 
从 一 I Fa Fs, F 任意 
I F;, 
FF 
定理 证 毕 . 由 这 个 定理 得 出 以 下 几 点 事实 ， 

EE( 及 ) 庆 7 六 (这 一 点 由 (更易 看 出 )， 是 对 任何 ,+ 所 f' 后 in 
Cm C9 入 为 十 的 行 、 列 数 ), 存在 及 致 *ECA) 一 + 

b，47 唯一 的 充 要 条 性 是 4 存在 . 

2， 有 4 的 基本 性 质 . 定理 23，1” 车 方程 4x 一 4 有 解 (A,YY 已 知 ,x 未 
知 ) 而 丰 为 入 之 尾 一 广 沁 诞 , 则 及 必 为 其 一 解 ,3? 若 当 Aw 一 g 有 解 时 ， 
By 必 办 其 一 解 ， 则 吾 一 入- 3° 浅 全 为 及 之 尾 一 广义 送 ， 则 方程 号 xz 一 和 
的 通 解 为 红 一 4-)m zs 任意，4° 洲 甸 症 0 而 wo 为 4z 一 引 的 一 解 , 则 必 存 在 
一 个 忆 , 玫 x 二 =A. 

注 . 此 定理 反映 了 引进 广义 逆 的 丸 起 , 就 是 在 委 不 为 满 秩 方 阵 时 起 有 -1 
的 作用 . 

定理 的 证 明 ，1? 车 4z 一 有 和 解 ， 则 存在 xo 致 上 一 x0. 这 时 AC 
一 44 A 一 xz0 一 自 ， 好 克 下 询 为 一 解 ，2° 以 … tw 记 有 4 的 各 列 , 则 
方程 4x 一 a 有 和 解 ( 妆 实 上 ,* 一 (0 pe 0, 1 0,，…, 全 为 一 解 一 并 在 第 、 
个 位 置 ), 因而 Ba, 为 其 一 解 , 印 

4Bai 一 ao iml, 大 
由 此 得 出 4B4 = 4 因而 B=A4-，3° 显然 (一 人 40z 必 为 dz 和 之 解 ， 
此 因 


) Ra，Fa，FP 任意 ， 


AU—A-A)s= (ds 由 


9 


混 尾 何 *, 反 过 来 , 洪 xo 为 4x 一 0 之 和 解 , 取 5==xo, 将 有 
tf A Axo 用 一 :2o， 
因而 zo 必 可 表 为 好 -4 -ds 的 形状 。4? 我 们 先 考 串 一 特 味 情况 ， 


人 

oO oF 

这 时 ， 各 必 有 (wn, ry 0, 0 前 形状 , 仿 ， "yy Yr 不 全 为 0. 为 确定 计 
设 信 亲 4、 直 定理 工 知 , 什 一 形 如 


I, G&G 
a-( DE ) 02) 


的 算 阵 蓄 为 及" 设 如 一 Cl 
t=1,…, fr， 取 吕 之 第 一 列 为 

CE os nf Y1)', 
而 其 余 各 列 为 9， 叉 取 写 = 吾 = 人， 则 出 ( 约 式 雇 定 的 吾 为 一 个 4 ， 且 易 见 


I 0 
By = xo. 对 一 盘 情 况 , 记 4~ P{ [ 0 ja 由 


I 0 jo 
r(0 0 = 


IL 0 . 
记 Qeo 一 名 户 坪 一 条 (0 0 ~ 且 由 入 直 知 痢 关 0， 由 已 证 部 分 ， 


知 存 宪 形 如 ( 允 的 晴 , 致 宇 = BY, 即 Qxo 一 BP 入 而 wo 一 1BP 1 但 册 定 
理 1 知 QBP 1 为 一 个 44-, 这 证 明了 4? 因而 完成 了 定理 的 证 明 。 注意 : 当 
4=0 时 ,4° 显然 不 必 成 立 . 
定理 8. 对 任何 和 有 
ACAAY A A=A, AAdCAAY A'=A' (3) 
证 ， 对 任何 矩阵 CC， 以 -4(C) 记 的 列 向 最 张 成 的 线性 子 空间 ， 记 
B= 一 有 则 显然 ECB) ALAd)， 切 一 方面 有 B= 
0 44 一 鼻骨 一 由 这 说 明 ACB) 上 .4 《A)， 因 而 -#* CB) 只 能 包含 0 
向 量 , 即 吾 = 0， 这 证 明了 (的 的 第 一 式 , 第 二 式 完全 类 似 地 证 明 . 
系 . 车 品 >0, 则 有 
, = AA UD dd Ud A UA A (4) 
事实 上 , 由 U>0, 将 口 表 为 3302 并 记 U2A-B， 则 由 (3) 知 B= 
B(B'BY》“CB'BY》, 即 


UA= ACA UA A UA), 


630. 


两 边 消 去 全 注意 研 人 ?>> 人 0 , 即 得 ( 涩 的 第 一 式 , 第 二 式 证 明 类 似 . 

定理 #4， 对 任何 矩阵 态 , 444 册 与 人 (444 的 选择 无 关 , 且 等 于 往 
只 (有 验 ) 内 的 投影 变换 的 和 矩阵 。 

证 . 这 个 结果 在 本 音 正 文中 曾 用 最 小 二 冬 法 的 观点 证 明 过 ( 见 $5.2 
(三 ， 此 处 给 一 个 另外 的 证 明 。 首先, 对 任何 w ,有 AC4 4A) "AxE.A#4)， 
六 区 一 租 ( 寻 向 ) 着 2 |. 人 (4) 此 因 册 (3》， 

是 (一 4 dz 一 [一 (4 一 站 
同样 , 由 (3) 知 4( 和 A)-dw=w 当 w 忆 .和 有 4)。 定 理 证 毕 . 

由 投影 矩阵 的 性 质 知 鼻 (4'4)™ 征 必 为 对 称 寡 等 的 ， Gd .44 的 需 
等 性 很 易 由 (3) 直 接 证 明 。 至 于 其 对 称 性 ,将 在 后 曾 用 简单 方 靶 证 实 ， 

38，MM0076-Penrose 广义 道 4+， 设 是 为 任 一 矩阵 ， 落 乱 阵 吾 满 足以 


下 四 个 条 件 ; 
1° ABA=A, 2° BAR-B, 
3° (AB)'~AB, 4° (BA)'=~BA, 


则 称 旦 为 所 的 Moore-Penrose 广 尘 道 并 记 为 4+， 由 1? 知 4+ 必 为 本 .由 
2" 知 是 为 嫩 的 广义 道 ， 显 然 , 由 这 四 个 条 件 基于 4 B 的 对 称 性 知 
B=A+! 从 二 一生 + 
定理 5. 对 任何 4, 4+ 存在 唯一 . 
证 . 先 证 唯一 性 . 设 站, Y 都 是 4, 则 由 以 上 四 个 条 件 知 
其 一 其 退 其 一 大 1 生 天 六 一 下 在: 砷 一 发 宫 代 村 YAY' 
RRA YA NAR CAYY ~ XAXAY 
=~KXAY— (XA) YAYPT= (XA) YA)'Y 
=XAYA'Y' YAXAY YY A'Y'Y 
一 【dd 一 Y, 
这 证 明了 唯一 性 . 
为 了 证 骨 存 在 性 , 我 们 利用 短 阵 论 中 周知 的 事实 : 设 姬 为 着 xy 矩阵 且 
斑 (4) 一 +, 则 所 可 表 为 及 =PQ，P， 但 分别 为 hx+ 和 +xm 阵 ， 其 秩 赂 为 
+。 册 下 知 PP 了 和 GY 此 为 + 阶 满 秩 方 阵 ， 令 
B= QAO PP LP., (> 
我 们 来 验证 吾 满足 44* 定义 中 的 四 个 条 性 ; 
ABA= POO OO) PP 1P PO PO=4, 
BAB—Q (QR) PP PFPA QO) PP) iP 
~ RO) PP) 1P'=B, 
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AB= POR OFTPPY P= POPPYP 
为 对 称 方 阵 , 因为 (PP) 为 对 称 方 降 , 又 
BA=Q (QQ) (PPP PO- QO 全 
为 对 称 方 阵 , 理由 与 上 岗 ， 因 此 已 确实 满足 和 4? 的 四 个 条 件 ， 定理 证 毕 。 
由 此 定理 可 得 以 下 几 点 推论 ， 
鱼 ， 划一 
此 因 若 如 定理 中 那样 表 所 为 妥 =PQ, 则 =Q'P， 于 是 由 定理 得 
AT=(PYTP' PY ON OTA) 
-POPPIQQ) 0O= A* 
b. 若 甩 为 nxr 算 降 , 著 汶 7f, 则 


Ar=(d'd)-1d', (6) 
车 扫 为 rxm 矩阵 , 秩 为 "由 
+ 一 由 (dd (7) 


事实 上 , 若 扎 为 nx*+ 彝 隆 , 秩 为 r, 则 4=AL 二 了 分 别 起 定理 中 的 记忆 的 
作用 ， 己 之 代入 (5) 式 立 得 (6)， 类 似 地 证 明 人 7)。 


当 有 4 为 对 称 方 隆 时 , 它 可 琢 为 
各 一 古 LLP 
其 中 卫 为 正 交 阵 , 而 盘 为 对 角形 ， 
是 一 diagCa 和 Os OD hp 1, 人 
这 时 有 A'=Pdiagthi’, yp 0 0, py OP. 


这 不 难 直 接 代 入 47? 四 信条 件 趾 去 验证 而 得 到 ， 特 别 , 由 好 表达 式 嫂 当 用 对 
称 时 , 4* 也 对 称 、 但 这 个 事实 直接 由 定理 5 的 推论 & 得 到 , 因 

FS 
利用 这 个 事实 可 以 证 胡 前 面 指 出 过 的 一 件 事实 , 即 对 任 向 生 , ACA'A) 44 对 
称 。. 此 国 我 们 已 证 明 444 4 与 (和 及 ) ”的 职 法 无 关 , 歼 可 取 C 和 4)+ 为 
(44)-， 因 为 十 4 对称, 故人 4 4 也 对 称 , 因而 44 4 也 对 称 。 
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六 章 非 参 数 统计 


前 儿 章 中 我 们 讨论 的 统计 问题 大 多 属于 这 样 一 种 情况 ， 样 本 
的 分 布 族 药 数学 形式 已 知 ， 但 其 中 包含 有 限 个 未 知 的 实 参数 ， 
最 典型 的 情况 是 关于 正 态 分 布 族 中 的 均值 、 方 差 的 估计 和 检验 问 
题 . 这 种 情况 一 般 称 之 为 参数 统计 问题 . 

然而 , 在 以 往 我 们 也 磁 到 过 少量 的 情况 , 其 中 对 分 布 族 并 未 给 
出 其 数学 形式 , 而 只 作 了 某 些 一 般 性 前 假定 ， 例 如 , 根据 CunproB 
定理 (定理 3.5.6) 检验 两 组 样本 是 否 取 自 具 同 一 连续 分 布 的 总 
体 . 在 这 里 , 只 假定 了 分 布 族 中 每 个 分 布 都 连续 , 而 对 其 数学 形式 
则 一 无 所 知 、 又 如 $4.10 中 求 连 续 分 布 的 容忍 限 和 容忍 区 间 的 
问题 ， 在 此 与 上 一 样 , 只 僵 定 了 分 布 族 中 每 个 分 布 连续 , 其 它 则 一 
无 所 知 ， 类 似 这 种 情况 的 问题 一 般 称 为 非 参 数 统计 问题 

以 上 对 参数 和 非 参 数 统计 同 题 的 划分 ， 只 能 看 作为 一 般 描述 
性 的 .我 们 不 可 能 也 无 必要 对 这 两 类 问题 划 出 一 条 严格 而 包罗 一 
切 的 界线 ， 拿 第 五 章 所 讨论 的 线性 模型 来 说 ， 车 假定 e~N (0O， 
0 了 ), 则 自然 是 典型 的 参数 统计 问题 当 只 假定 YAR(e) = cc 而 
对 e 的 分 布 并 无 特殊 的 假定 时 , 根据 上 面 的 描述 性 定义 , 问题 带 有 
非 参 数 的 性 质 ， 然而 , 习惯 上 并 不 认为 上 一 章 我 们 所 讨论 的 那 种 
线性 模型 属于 非 参 数 统计 范围 ， 由 于 这 个 原因 ,本 章 虽然 是 以 非 
参数 统计 为 主题 , 但 也 不 能 不 涉及 某 些 参 数 福 质 的 问题 , 特别 是 在 
8 6.1 中 . 

在 非 参 数 统计 河 题 中 , 由 于 对 分 布 族 的 限制 很 小 , 而 形成 它 的 
以 下 的 几 个 特点 ; 第 一 是 其 解 受 总 体 的 具体 分 布 的 形式 影响 较 小 . 
这 个 概念 可 以 拿 上 文 所 到 的 两 样本 问题 的 Caprog 检验 来 说 明 ， 
使 用 这 个 检验 ， 只 要 两 个 总 体 的 分 布 确实 不 同 ， 总 多 少 有 些 鉴 别 
力 。 但 如 象 检 验 两 个 正 态 总 体 有 相同 的 方差 的 方差 比 检验 前 性 
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能 ， 则 很 取决 于 总 栖 分 布 确 为 正 态 这 个 前 提 . 当 这 个 前 提 不 成 立 
时 , 检验 的 性 能 可 以 很 十 。 这 个 性 质 是 非 参 数 方法 一 个 很 大 的 优 
点 , 也 是 促进 非 参数 方法 发 展 的 一 个 原动力 ; 第 二 点 是 , 由 于 非 参 
数 方 法 的 适用 面 广 , 其 针对 性 往往 较 差 .比方 说 , 前 几 章 中 我 们 在 
总 体 分 布 为 正 访 的 假定 下 发 展 的 一 些 方法 ， 都 可 以 用 非 参 数 方法 
来 代 直 .但 在 总 体 的 分 布 确 为 正 态 时 ,就 不 如 用 那些 专 为 正 态 情 
况 而 发 展 的 方法 好 .这 是 互相 韦 盾 的 两 面 ， 当 我 们 对 总 体 分 布 的 
性 质 并 无 足够 的 了 解 时 , 使 用 非 参 数 方法 可 视 为 一 种 保险 , 以 获 免 
大 对 总 体 分 布 的 假定 不 对 而 造成 重 六 的 错误 ， 其 代价 是 所 用 方法 
的 效率 可 能 较 低 ; 最 后 一 个 重要 特点 是 ， 由 于 对 总 体 分 布 所 知 甚 
少 ,， 非 参数 方法 中 所 涉 发 的 统计 量 的 精确 分 布 ， 除 了 极 个 别 例外 ， 
一 般 都 难于 求 得 , 因此 , 在 非 参 数 方法 中 , 大 样本 理论 占有 很 重要 
的 地 位 。 近 三 十 年 来 非 参 数 统计 有 了 比较 显著 的 进展 , 其 主要 成 
时 也 是 在 大 样本 方面 . 

本 章 的 内 的 是 ， 对 有 目前 非 参 数 统 计 的 某 些 重 材 发 展 的 理论 基 
础 部 分 , 作 一 比较 严格 的 讨论 , 过 于 专门 的 理论 问题 , 以 及 特殊 性 
质 的 应 用 问题 , 由 于 本 书 性 质 和 和 篇幅 的 限制 , 不 在 讨论 之 列 。 


§ 6.1. 次 序 统计 量 与 极 值 分 布 


在 最 简单 的 情况 下 , 次 序 统计 量 可 定义 于 下 ; 设 下 为 一 个 一 
维 变 最 , 其 分 布 属 于 某 个 分 布 族 8 多， 设 XX …， 尽 为 亨 的 iid, 
赫本， 将 它 按 大 小 排列 为 

是 当下 们 呈 ny 

称 【a pw， 王 ) 为 次 序 统计 是。 对 发，…, 下 四 中 的 一 部 
分 , 也 可 以 使 用 这 个 省 称 . 

本 韦 前 几 章 已 接触 到 基 些 与 次 序 统计 量 有 关 区 问题， 以 及 这 
种 统计 量 的 应 用 ， 例 如 在 第 一 章 中 我 们 讨论 过 次 序 统计 量 的 充分 
性 与 完全 性 ， 在 均 勾 分 布 的 居 计 向 题 中 涉及 到 下 gm) 和 了 wm 在 
$4.1(8) 中 讨论 一 般 过 续 分 布 的 容 垄 限时 , 使 用 过 次 序 统计 和 是. 然 
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耐 ， 这 不 过 是 这 个 极为 重要 的 统计 量 的 丰富 前 理论 和 广泛 的 应 用 
的 一 更 而 已。 而 且 , 次 序 统 计量 的 许多 重要 应 用 是 在 参数 性 的 统 
计 和 问题 中 ， 因此， 把 这 个 题目 列 为 本 章 的 一 部 分 也 未 尽 恰当 ， 然 
而 ， 我 们 编写 这 一 节 的 目的 是 讨论 车 千 与 次 序 统计 量 的 极限 分 布 
有 关 的 同 题 ， 特 别 是 极 大 信 于 ew 和 极 小 值 及 a 统称 为 极 慎 ) 的 
极限 分 布 问 题 ， 因 为 它们 不 仅 在 实际 问题 中 有 重要 应 用 ， 且 其 严 
略 而 较 仔 细 的 理论 讨论 , 在 一 般 书 籍 中 不 易 找 到 . 鉴于 次 序 统计 
量 的 重要 性 ， 我 们 也 打算 花 很 少量 篇 幅 对 其 主要 的 应 用 方面 作 一 
极 简略 的 介绍 ,而 不 去 深入 其 细节 , 特别 是 对 种 种 具体 分 布 的 大 量 
数值 结果 ， 有 兴趣 的 读者 应 当 去 参阅 有 关 状 其 和 文献 (例如 [9]). 


(一 ) 基本 的 分 布 问题 


假定 于 1,，*…， 天 ,为 ij 记 .， 互 + 的 分 布 函数 下 (w) 绝对 连续 , 密 
度 记 为 了 9) = 了 Fw)， 以 (Ys … 了 nw) 记 次 序 统 计量 (Xs …， 
也 oa), 则 (> Wy YF 的 密度 函数 显然 是 

Ds 2 Ye 一 | fyD YD 用 裤 及 二 

0, 其 它 ， 

取 任 一 个 分 量 了 显然， 要 事件 {Yr 所 ww} 成 立 ， 充 分 必要 条 件 是 
琶 bb …， 互 s。 中 有 zer 个 不 超过 w， 于 是 , 车 以 Fi 记 六 的 分 布 函 
数 , 将 有 


Pre) 一 局 二 -之 ( je 划一 了 (站 ”3 (6.1.1) 
使 用 分 部 积分 法 容易 得 出 


兄 ! hd 1 网 一 站 
万 (= Dn 为 
一 了 pe Cr， 名 一 站 十 二 ， ‘6.1.2) 
而 
一 mx 加! 一 各 一 下 
Fe) 一 五" 人) GU 1¢2) [1 F(g)] (2), 


(6.1.3) 
了 就 是 所 调 不 完全 后- 画 数 ， 


任意 两 个 次 序 统计 量 的 联合 分 布 也 训 以 由 上 面 的 方 法 得到， 


也 不 如 直接 用 下 述 方 法 , 特别 是 ,这 方法 容易 推广 到 老 个 次 序 统 计 
量 的 情况 . 

歌 了 了 。 Y,, +*<3， 任 纵 呈 过 为 可 了,, 了 ,分 别 莫 在 (好 ， 
和 十 004) 和 (Ya， 和 十 dz9) 内 , 充 要 条 件 为 : 在 于 1,…， 了 中, 有 
?一 个 所 4， 一 个 在 (zt mi 十 wD) 4 一 7 一 二 个 在 tm 二 dm x2)， 
一 个 在 (ts zs 十 Bm) ,其 祭 一 #8 个 之 ta 二 dxs， 于 是 得 到 (YY, 了》 
的 密度 函数 户 oa， 的 ) 为 : 当 :各 所 a 


| 
加 Cr 0) ~ TTT 
x EP-ito) (Fs) — FPO) 
x 革 一 盏 (za)] "fm) Fr), {6.1.4) 
而 当 和 加 记 vm9 时 为 0. . 
一 般 碟 ， 对 瑟 个 次 序 统 计量 卫 %, :了 7 二 Tr 
其 联 各 密 麻 六 fa 为 当 时 
frr Kl EE 


一 %1 下 Fo HB [Pres) — Fo) lm }; (6.1.D) 


(riri— 1) 1 
这 里 约定 , 令 0 一 一 co0, x4 一 00， To 一 日 ， Pg41 一 各 十 4 
由 次 序 统 计量 出 发 可 定义 一 些 有 出 的 统计 量 。 其 中 重要 的 有 
样本 中 位 数 。 样本 分 位 数 ， 极 差 (Range)、 中 程 (Midrange) 
等 。 这 里 先 考虑 后 两 个 、 其 定义 分 别 为 


Wj 一 及 a HH 一 六 (并 十 下 。 (6.1.6) 
让 司 .1. 涩 得 出 《ay 下 wm) 的 联合 密度 为 
中 (各 一 二 [机 人 ) 一 可 (人 DN, By, 


而 变换 (6.1.6) 的 Jaoohbi 之 值 为 二 得 ( 环 ，2) 的 联合 密度 为 : 当 
Ww 时， | 


yn, mm) 一 天 (和 一 二 生生 =) 


-1 


而 当 w<0 时 为 0， 由 此 得 出 琴 的 密度 为 
1(w) -| rw mm) gm, 
在 此 积分 中 作 变 数 代 换 % 一 全 十 4 不 难得 到 


gw) —n] FD LF (et) -FO (+e) do, 
(6.1.7) 
当 w<0 时 ,有 网 (w) = 0。 而 全 的 分 布 范 数 为 


Ga0o -| not 
=a] FO thd -PY (ot dtlds 
一 "| 《由 { ， (FD -F(adF (wt Jar 
-ay [Fe+ 由 一 了 eds. (6.1.8) 
类 似 地 求 出 天 的 密度 函数 为 
gabon) -2 EF mt Pm -oI mF ma) da, 


(6.1.9) 
一 般 地 ,对 任何 <s 不 难得 到 瑟 o 一 等 o 和 于 (Km 十 下 oj) 的 分 


布 . 


二) 样本 分 位 数 的 渐 近 分 布 


设 随机 变量 X 的 分 布 函 数 为 也 (), 而 0<p<1， 任 一 满足 
条 件 卫 (<#p) 所 了 (于 所 5p) 之 p, 也 就 是 Plés— 0 SpEF (Es) 
的 6, 称 为 变量 了 及 分 布 的 p- 分 位 数 , 当 p 一 睹 时，&s 特 称 
则 名 必 满 足 了 (Ej) ~p， 伸 不必 是 唯一 的 ， 荐 了 (w) 连续 且 当 
0< 了 (am) <1 是 严格 上 升 的 ， 则 各 存在 唯一 ， 常 见 的 连续 分 布 都 
属于 这 种 情况 。 
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车 着 1，…， 下 ,为 及 的 i 记 . 冬 本 ， 了 oy 所 … 所 下 ww) 为 其 次 序 
统计 量 . 对 任何 入 0<Dp<l， 称 如 = 三 on 为 样本 条 分 位 数 


([ag] 为 不 超过 a 的 最 大 整数 ) 当 p 一 上 时 ,3/s 称 为 样本 中 位 数 ， 
一 般 , 对 祥 本 中 位 数 作 更 精细 的 定义 如 下 ; 


有 到 (人 和) 当 “ 为 奇数 ， 
és = 1 
可 [县 em 十 在 ora+ 加 ， 当 ”为 偶数 ， 


对 一 般 的 2 祥 本 分 位 数 也 可 以 作 更 精细 的 定义 例如 当 m=8 
而 2 一 各 时 , 根据 定义 , 如 js 一 耻 w, 而 从 直观 上 看 ,人 ne 以 定义 在 


(em， 互 mo) 这 个 区 间 内 的 某 处 为 佳 ， 由 于 以 下 兵 讨论 大 样本 性 
质 , 这 个 精细 化 的 意义 不 大 . 

现在 设 给 定 了 PD pg 0 之 px 所 I， 以 了 m 记 样 
本 大 小 为 # 时 的 样本 pr 分 位 米 ，s=. :KY= (Fa …， 
工 xs '， 下 面前 定理 建立 了 当 pr-~>eo 上 时， 于 的 极限 分 布 ， 

定理 6.1.1. 设 太 (ww) 绝对 连续 , 以 扣 记 它 的 pr 分 位 数 , i 一 
站 设 F) 一 五 ( 乓 在 点 各, …， Ex 处 连续 娃 不 为 0、 帆 
当 ”co 时 ,有 

VW (FA SO, 4). 
此 处 一 (és 由 二 Er)', A 人 xm 其 中 
My= pip) /EOF ED], hij, mW Mn — Ny. 

证 ， 本 定理 的 严格 证 明 甚 为 复杂 ， 我 们 来 分 锋 讨 论 . 

1” 先 假定 琅 为 [0, 如 上 的 均 鲜 分布 ， 而 下 1， 记 和 加 一 
所 一 一 [mp] 十 TI， 依 (6.1.3)，7。 即 下 (my 的 密度 函数 为 


! 一 1 pm 
WA CK 
( 当 0<s<l, 此 外 为 0)， 
因此 MW( 了 ,一 畦 ) 的 密度 为 


4 SHB * 


一 一 


了 2 


! 
CE nt 


x (1 于 -区 让 "大 ， 


要 证 明 当 mw_>co 时 ， 
1 a 
OO J exp( -二 人 ). 


由 于 m 一 1, ww 一”m 和 "都 赵 于 无穷 ,根据 Stirling 公式 


和 Fr TV dr , B Troo, (6.1.10) 


1 
7 网 -~ VID 


Sra er 


而 当 -n->oe 时 ， 
ng 全 + vrs] 一 [~- 2] "} 
-oo 人 + 于 
十 Gm) we (1— Me) 


-| 


+ {六 
人 
~1-、 1 
32 人 革 一 下 


， 1 Em 
由 此 得 出 Hm 记 四 gspa- “了 [- 三 三 5 


= 9 = 


1 


ER 


这 证 明了 当 % >co 时 ， 
Vr (7.-2) NO, pI —D)). 
由 于 #=p 各 = [说 十 二 知 Va (2-é)—0, 当 n>o0, 面 
VEO -Vit Vi -8), 


由 此 得 出 。 MC 一 > NO0, p01-D). 
3” 现 在 考虑 一 般 下 的 情况 ， 仍 设 下 为 [0, 了 内 的 均匀 分 
布 . 并 记 m= [mpd 十 二 “一 十 ， ty EK., 由 (6.1. 辣 得 了 ， 的 密 诬 函 
数 为 
fr wi yn ~ai[ 芯 《at 一 刘 一 二 ) 开关 Ci — Yl, 


当 0< 级 之 :之 yx 之 1， 它 处 为 0， 双 此 处 已 置 如 一 0, yx 一 1 
no 一 从，Nx+1 一 先 十 1 考虑 随机 向 量 


B= (Fas, ，，…， Zn) Vn (Fm, os, Ye), 

% 中 
则 2。,。 有 密度 
fi (81, 办 2x) 


后 一 于 再 展 Brti—nt—1 
一 一 #0 一 3 4 一 下， ti 
| [I 《arHz 一 中 一 二 !] 名 1 [ pr + 本 ] 


站] Pt 一 Fh Nl 
臣 (mari — HO— 1) ! | 站 ) 


.站 [i 十 Me Cm 


4 小 Mra Tt 
_ 名 | E 《os _ ne) ta 一 4 一 1 
和 一 一 下 


:并 [+ + Ga 一 2 Wan 


> 
此 处 已 置 =zx+ri 一 0 车 以 4 和 BB 记 上 式 的 两 个 因子 ， 出 


-= Gd0 中 


t= 


注意 到 {un 一 mr>oo 对 一 0，…, 天 以 及 名 ga 一 om 一 w+ 用 
Stirling 公式 很 容易 证 明 lim 4w= 么 存在 , 且 0<4<oo， 同 时 ， 
考虑 log B,, 使 用 与 1 的 情况 完全 相似 的 方法 ,将 得 在 2， …， 
zr 任何 有 错 的 范围 内 一 致 地 有 


。 i EE (wi 
lim log B= 一 二- i 
nm 2 总 Prei— Ps 
一 —gh, 1, KF), (6.1.11Y 


ya "…, gg) 是 其 变量 的 正定 二 次 型 。 所 以 , 如 能 证 明 
G~ 人 4 和 dear (6.1.12) 


则 我 们 就 将 证 得 当 m>oc 时 , 2。 依 分 布 收 语 于 一 非 退 化 的 多 维 
正 态 分 布 ， 现 在 来 证 明 (6.1.12)， 设 如 1 分 别 考 煤 GT 和 
<1 两 种 可 能 性 . 

a，G>1， 取 6 充分 大 , 至 


Ge … 和 并 十 38， 


此 处 了 一 世人 "yg zx) : lz | 0, "yp |zz| 0}, 
而 s>0 充分 小 ， 由 前 面 提 到 的 在 ea …, #x) 的 任何 有 界 域 上 
(6.1.11D) 的 一 臻 性 可 知 , 有 
lim P{| Zn] 0, 人 一半， ry 在 上 
一 人 er ge dor 1 +2e, 


因而 当 m 充分 大 时 , 有 
P{|Zn | 0 t=1, +, KE}>1+8, 
这 显然 是 不 可 能 的 . 
b. G<1, 报 据 前 面 马 证 的 下 = 工 的 情况 知 
必 一 六 (0， wil —p0)), 当 tx00, 和 一 二 iy £. 
页 对 任 和 给 s> 册 存在 >D 使 当 充分 大 寺 , 对 一 切 二 有 


PilZn] < 1—8. 
取 8 充分 小 , 致 1 一 玉 s 半 +s， 则 一 方面 有 
lim P(|Zul oe, $=1, ,KE) 


es [sae ng rar, (6.1.13) 
r 


另 一 方面 , 当 充分 大 时 ， ; 
PilZul eo, $=1, », 尺 ) 字 1 一 安 [LP(Zn| < 
1— Ke d+s, 
这 显然 与 6.1.1D 矛盾 ,从 而 证 明了 好 = 工 


因此 , 我 们 证 明了 当 %>oo 时 ,用 -二 > 入 (0, 4) 这 里 A 为 
二 次 型 立 (4ins 一 只 2/ (pus 一 PD) 的 矩阵 一 (hy) xx 的 道 矩 阵 ( 福 


意 ; x 一 zx4i4= 二 中， 易 见 
ha — Piri— pi) /LP — Pe) (pi— Di) ], 

1 

物 r1 一 Dr 
k=0, 当 | 一 讶 这 二 知 一 0，pgra 一 二 

宜 接 计算 证 明 

= (On) rr 一 吾 - 其 中 略 一 一生 寺 一 其 )， i (6.1.14) 
因此 证 明了 : 


VFa- 时 Yu ) > NO, 4). 


人 


Hi+1 一 向 HH 一 一 


有 利用 V (如 一 -全 - 广 >0, 即 得 


Vs- 眉 一。 1. 
3e 一 般 情况 , 记 完 /二 也 (ZD),j 一 1 3 并 以 到 记 序 ， 
全 。 的 样本 pc 分 位 数 , 5 一 1,…， 至 ， 根 据 引 理 3.5.3, 完 ,， 完 ，,，… 
为 iid， 且 乱 一 尺 (0, .于 是 由 已 证 的 3° 得 
PV Pp ££, Fas pa)' > NO, A), 
这 里 项 由 《6.1.14) 定 出 ， 由 于 Fw) 一 机 四 在 点 页， -…, Er 处 
a Bie 


连续 且 不 为 0 (注意 名 的 意义 为 p= 玉 (E))， 知 存在 。>0, 使 当 
1, 一 pl 所 8 时 ,有 了 n= 了 全 惧 ， 了 -1 为 记 的 反 秀 数 . 即 当 
IP —z| <s, t=1, ,££ (‘6.1.15) 
成 立时 , 有 
Fu—é—= 1 (PD —F (pp) 
-Ey [+00D] (Fup, (6.1.16) 
由 于 当 吕 充分 大 时 , 事件 (6.1.15) 的 概率 可 任意 接近 于 十 可知 
1 — 1 a Eo [EE 一 
lm P{Yw 6 py tt DI GD 于 
于 是 
VR Ww, 
1 二 中 1 六 
(ET Cup, » FE 人 px) ) 
-一 宪 示 左右 两 边 有 同一 极限 分 布 ; 由 2° 得 出 
W. -> N (0, 4), 
当 no00, A= Qn rr 而 N=D lp /FIFEN] 当 是 号 


hn 一， 这 就 完成 了 定理 的 证 明 ， 
内 本 定理 推出 的 在 应 用 上 重要 的 结论 ,有 


1. 到 =1, 这 时 
Vn > PHI—D 
(一 上 9) Nn( 0, re ) (6.1.17) 


特 册 , 当 p= 访 时 得 到 样本 中 位 数 各» 的 极限 分 布 
时 万 1 
Vn Etat 一 N{o, -PR 6,1 .18) 
2， 玉 =2, 这 时 对 任何 0<p<ps<1 有 


VR ED) — (Es +E > NO, ooo), (6.1.19) 


其 中 
—) ,2p (I — ha) pal 一 Bo 
EA t FE FE 十 PE (6.1.20) 


= da3» 


eT 


特别 重要 的 是 po=I 一 za( 0<pi< 冯 ) 的 情况 . 


(三 ) 次 序 统计 量 在 统计 问题 中 的 应 用 


次 序 统计 量 之 用 于 估计 问题 , 一 般 常 见 的 有 以 下 几 种 情况 . 

a， 一 种 情况 是 用 次 序 统计 量 来 构造 昌 不 很 有 效 ,但 计算 省 便 
的 方法 ， 这 种 方法 特别 适用 于 需要 用 简便 的 计算 很 快 得 出 结果 ， 
以 及 数据 很 丰富 ， 因 而 主要 矛盾 在 于 计算 而 不 在 于 个 计 的 有 效 性 
上 ， 这 可 以 拿 正 态 总 体 不 (a, oa) 中 参数 4 和 oa 的 估计 来 说 明 . 
对 估计 而 言 ， 采 用 cuS 型 (o. 为 常数 , S: 一 王宫 (XX 一 卫 )”) 
的 无 偏 估 计 ,是 MVUE 估计 .但 如 用 基于 极 盖 

Wa— max XY.— min 1 

的 无 偏 居 计 .WV 为 常数 ， 选 择 之 使 四 不 。 为 = 的 无 偏 估计 )， 
则 计算 其 方便 但 效率 较 低 ，6。 有 表 可 查 ， 例 如 ， 当 % 一 2, 3, 5 
10, 20 时 ,本 分 别 为 0.886, 0.591, 0.430, 0.825 和 0.268， 这 
个 居 计 韵 效 率 可 以 由 比值 ~ Var (cnSn) 7 Var (a 得 到 一 些 
概念 ， 当 "为 2,3, 5, 10, 20 时 ， 其 值 分 别 为 1 0.992，0.955， 
0.850 和 0.700、 当 m 较 大 时 , 可 以 先 分 成 较 小 的 组 , 每 组 分 别 使 
用 极 差 估计 ,再 将 各 组 结果 平均 ， 另 一 个 可 用 来 代替 cS, 的 估计 
( 当 ”甚大 时 ) 为 W 总 立 容 | 开 , 一 各 sa|， 还 有 另 一 些 基于 样本 分 
位 数 的 估计 . 

对 分 布 的 对 称 中 心 , 7/s 是 一 个 较 常 用 的 估计 由 极限 定理 
(6.1.18)， 易 知 在 正 态 分 布 场合 , 这 估计 的 渐 近 效率 为 2/x。 即 当 
n 甚大 时 , 采用 台 / 合 计 &« 要 达到 用 豆 同 样 的 精度 , 前 者 的 样本 大 
小 约 需 为 后 者 的 WY/ 于 倍 ， 然 而 , 在 某 些 场合 下 ， 例 如 总 体 分 布 为 
Cauchy 分 布 


fl%, 全 = 十 [+ 2-0) 


的 情形 , 为 估计 9, 于 根本 不 省 用 , 因为 其 分 布 与 对 1 一 样 ,但 如 用 
é1s, 则 它 是 一 个 无 偏 估 计 ( 当 ”>>3) 且 其 渐 近 方差 与 0-R 下 界 之 
比 为 m3/8. 

庙 一 个 基于 次 序 统 计量 的 、 正 态 分 布 均值 a 的 估计 是 


雪人 多 + 如 -2), 对 任何 0<p<1， 这 估计 的 源 近 方差 可 由 (6.1.20) 


算出 , 因而 可 到 定 出 p, 使 之 达到 最 小 , 这 个 p 值 近似 地 为 0.2702. 
类 似 地 可 以 讨论 基于 多 个 次序 统计 量 的 线性 组 合 的 情况 . 

b. 另 一 种 情况 是 , 在 某 些 问 题 中 , 由 于 种 种 原因 , 观测 数据 中 
最 大 或 最 小 的 若干 个 (或 二 者 兼 而 有 之 ) 不 可 靠 , 甚 全 根本 得 不 到 . 
例如 ， 某 些 次 试验 可 能 受到 外 来 因素 的 干扰 而 产生 异常 大 或 异常 
小 的 突出 值 (outlier) .和 将 这 种 从 丢掉 后 再 进行 统计 分 析 ， 显 然 是 
更 为 稳妥 的 . 在 这 种 情况 下 , 上 一 段 中 提 到 的 那些 估计 方法 , 也 就 
是 基于 一 部 分 次 序 统计 量 的 方法 , 仍 保持 有 效 ， 例 如 , 设 %=10, 
即使 不 知道 芷 @ 和 下 ao 也 不 妨碍 样本 中 位 数 的 计算 . 

在 海 命 试 验 中 经 常 使 用 所 谓 规 尾数 据 (Censored data) ， 设 想 
将 ”个 元 件 局 时 作 试 验 , 这 ”不 元件 中 , 一 般 常 有 少数 的 玫 个 , 其 
寿命 特别 发。 因此 要 等 到 这 “个 元 件 都 用 坏 ， 时 间 就 会 过 长 ， 这 
时 就 使 用 截 尾 的 方法 , 我 们 可 以 定 下 一 个 时 间 各, 试验 最 多 只 进行 
这 么 入， 如果 到 时 刻 如 时 已 有 Y 个 元 件 用 坏 , 其 寿命 为 五 gj 志 … 
所 至 则 我 们 得 到 了 前 7 个 次 序 统 计量 , 这 种 定时 截 尾 的 方法 叫 
I 型 截 尾 ， 注意 ”为 一 个 随机 变量 ， 另 一 种 截 尾 方 法 是 先 定 出 一 
个 整数 ?+， 试 验 作 到 怡 育 + 个 元 件 用 坏 时 为 止 。 这 时 我 们 仍 得 到 
下 由 忆 … 必 芋 gy， 所 不 同 的 是 这 里 7 是 一 个 定数 而 非 随机 变量 , 这 
种 定数 截 尾 的 作法 称 为 II 型 截 尾 , 我 们 也 可 以 考虑 从 低 端 蕉 尾 的 
情形 。 例如 当 只 有 反应 强度 达到 一 定 界限 以 上 时 ,才能 被 仪器 记 
录 的 情况 , 更 一 般 地 可 以 在 两 端 同时 截 居 ， 在 截 尾 方式 已 定 后 , 堆 
尾 样 本 的 分 布 可 以 通过 总 体 分布 表 出 ， 因 而 可 以 利用 它们 来 对 总 
体 分 布 中 的 参数 进行 推断 ， 讽 如 , 设 总 体 分布 为 7(s, 人 dw, 则 蕉 
尾 样 本 (下 内，…， 到 6) 的 密度 为 


(fo, 9] #6 neo] ( ” rs 


因而 可 以 寻求 乡 的 极 大 似 然 估计 .关于 截 尾数 据 的 分 析 问 题 在 文 
献 中 有 大 量 的 讨论 . 

虽然 我 们 不 打算 对 次 序 统计 量 在 估计 问题 上 的 应 用 作 较 全 面 
的 讨论 ， 我 们 还 是 打算 提 一 下 所 谓 次 序 统 计量 的 最 优 钱 性 组 合 问 
题 . 

设 并 …， 达 "为 抽 自 一 个 包含 位 置 参数 严 和 刻 诬 人 参数 口 的 


分 布 族 {P( 2 全)} (这 里 也 为 过 续 分 布丁 数 ) 以 下 am …， 


记 次 序 样本 ， 蛋 寻找 常数 己 ， 6m, 司 三 人 十 … 十 on 了 上 w 为 遍 
的 无 偏 佑 计 , 生 在 一 切 这 样 形状 的 无 偏 居 计 中 其 方差 达到 最 小 . 


记 可 -二 人 一作 二 nm 则 Ta …<D。 为 抽 自 分 布 


到 (中 的 次 序 样本 ，、 记 
m= BUYV, oy~ Oov Us, UD, 1&%, jn, 
则 有 
wo 6 &= 0 —0), Sl1, +, (6.1.21) 
这 正好 是 一 个 包含 参数 志和 o 的 线性 模型 ,其 中 
VARte) —od ~ gg) nxn, 
根据 定理 5.2,10, 得 Vw, 中 的 最 估 无 偏 线性 估计 , 即 GM 估计 ,为 


(2)-{: 站 
a 


天 全 
车 记 B= (1， + 人 一 《ct 本 On) ， f= (Eon, 一 则 
可 将 凡 和 = 的 表达 式 写 为 
有 一 一 如 妇 卫 站 一 2 了 
其 中 


人 一 人 gr 一 8 放下 (Fe) — (eV a)®, 


名 aVlio —eV a 
ro 人- 
fo 一 二) — (eV. 
可 以 证 明 ,在 站 关于 原点 对 称 时 , 这 些 公 式 简化 为 
Le yyY/ey!e, como:F/a Fa. 
Var =o0/e Ve, Var(o) =0*/@' Va. 

这 个 作法 喜 接 推广 到 截 尾 数据 的 情况 .因为 在 模型 地. 工 .21) 
中 ， 如 果 对 某 些 和 下 ow 被 “ 截 ” 掉 了 ， 并 不 影响 它 为 线性 模型 的 性 
质 , 因而 解法 在 原则 上 仍 完全 适用 . 

在 计算 上 , 这 个 方法 要 求 计 算 的 了 ,尤其 是 三- 除了 个 别 极 
简单 的 分 布 外 , 都 上 其 能 用 数值 方法 ,对 其 些 重 要 分 布 ( 如 正 态 分 布 ) 
及 不 大 的 wm 有 表 可 查 . 

次 序 统 计 熙 在 估计 问题 上 的 一 个 当然 的 应 用 是 估计 站 分 位 
数 。 诚然 , 对 参数 族 而 言 , Pp- 分 位 数 可 通过 参数 表 出 因而 可 能 存 
在 更 好 的 估计 ,但 在 对 总 体 分 布 的 数学 形式 并 无 所 知 的 情况 下 , 样 
本 有 分 位 数据 供 了 一 个 有 较 好 的 大 样本 性 质 { 新 近 正 态 性 ) 的 估 
计 。 而 且 蛋 要 的 是 ， 使 用 次 序 统计 量 可 以 构造 一 个 非 参 数 性 的 相 
似 置 信 区 闻 . 事实 上 ,显然 有 

PAXowEé TI) = PInPEy) — PITmPED), 
《这 里 假定 了 总 体 分 布 了 的 连续 性 , 因此 了 P(g; 一 0，) 由 于 
分 布 函 数 玉 (wm) 非 降 , 有 
五 (王八 区) — PF (Fe) FED), 

等 等 ， 再 注意 到 了 了 (6) 一 PD, 及 也 ( 荆 wy) 一 Di 这 里 本 所 '… 必 UT 为 
取 和 育 BOO, 了 的 次 序 样本 , 有 
PIXowEt To) = PU nD) —P Up) 

= Pp) — PU,<D 

-ptr, nr — TG n—s+1). (6.1.22) 
一 般 , 可 以 选择 一 个 适当 的 a>0, 使 sn(p 十 8) ,7 过 n(PD 一 并 
使 上 式 右边 尽 可 能 接近 指定 的 1 一 ge， 重 要 的 是 , (6.1.22) 的 右边 


mitT» 


具 与 %, 2 7, 盏 有 关 而 与 总 体 分 布 了 无 关 , 在 导出 6.1.2) 时 假 
定 了 分 布 了 连续。 然而 ,Tnkey 和 Seheffe 证 明了 : 当 总 体 分 布 
为 离散 时 (6.1.22) 的 左边 不 小 于 其 右边 . 

次 序 统 计 重 之 用 于 寻求 连续 分 布 的 容 恺 限 的 方法 ， 已 在 
条 .1D 中 讨论 过 了 ， 

次 序 统计 量 的 一 个 报 重 要 的 应 用 一 一 极 值 统 计 ， 将 千本 节 以 
后 几 段 讨论 . 

次 序 统计 量 之 用 于 稳 验 性 质 的 问题 ， 较 为 重要 的 有 关于 突出 
值 的 检验 , 寿命 答 验 等 . | 

当 我 们 有 了 一 组 数据 焉 1, …, 王 s 将 其 按 太 小 排列 成 
玉山 达 下 吕 及 (ny 如果 五 特别 大 ,我 们 怀疑 它 可 能 是 突出 值 ， 但 
是 , 由 于 抽样 的 随机 性 , 若干 个 观察 值 中 有 个 别 较 大 的 也 可 能 只 是 
随机 性 的 作用 , 而 不 必 是 由 于 有 外 来 因素 的 干扰 ， 要 在 客观 的 基 
础 上 作 一 判断 就 项 要 进行 检验 .这 种 检验 总 是 先 作 一 个 统计 量 ， 
它 反映 “突出 ” 慎 与 “正常 * 值 的 差异 . 在 零 假设 ( 即 无 突出 值 ) 下 推 
导出 其 分 布 ,定员 一 个 界限 ; 当 算 出 的 统计 量 值 大 于 这 界限 时 就 认 
为 是 突出 值 . 例如 ,在 总 体 分布 为 正 态 克 (e， om 时 ， 

a， 如 果 怀 疑 揭 是 及 my 或 下 gy, 可 分 别 用 统计 量 


。 下 一 守 下 一 习 
i 
b. 如 果 筷 m 和 玉 w 同时 被 怀疑 , 可 用 统计 基 
了 -号 (JF 为 极 差 ). 
这 统计 量 叫做 “学 生化 极 六 (Stadentixod Range) 

co. 若 有 多 个 值 受到 怀疑 而 这 些 值 都 在 一 边 ， 或 在 不 局 的 边 ， 
也 有 相应 的 统计 量 . 

由 于 这 些 统计 量 (在 零 假设 下 ， 即 羡 ，…， 瑟 siid.， 站 t~。 
(oo9) 的 精确 分 布 没 有 简单 的 解析 表达 式 ， 在 使 用 它们 作 突 
电信 的 检验 时 , 必须 有 相应 的 家 ， 例 如 , 当 ?= 20 时 , 对 统计 量 T* 
而 言 ， 其 5% 和 1% 的 界限 值 分 别 为 3.56 和 2.88， 就 是 说 ， 在 

se 


5% (I 免 ) 的 水 平 下 , 上 只 有 当 下 my 一生 >>2.56S (2.88S) 时 , 才 认为 
点 w) 是 突出 值 . 

关于 次 序 统计 量 的 应 用 的 极 简 略 的 介绍 就 到 此 为 目 ， 需 槛 了 
解 更 多 细节 的 读者 , 可 参阅 前 面 所 引 的 David 的 著作 ， 


《四 ) 极 值 分 布 的 三 大 类 型 


在 次 序 统 计量 中 , 极 大 值 全 mm 和 极 小 值 工 u) (统称 为 构 值 ) 在 
应 用 上 具有 突出 重要 的 地 位 .这 是 因为 ,一 些 灾害 性 的 自然 现象 ， 
如 地 震 、 洪水 之 类 , 都 是 一 种 极 值 ， 又 如 材料 的 疲劳 试验 等 , 用 极 
值 模型 来 描述 都 比较 方便 而 自然 ,使 用 极 租 的 一 个 很 大 的 优点 , 从 
应 用 的 角度 看 ,是 它 不 大 受到 数据 可 能 的 残缺 的 影响 ， 因为 极端 
值 往 往 是 最 司 人 注意 的 现象 , 因而 漏 记 或 丢失 的 可 能 性 小 , 这 在 使 
用 历史 数据 时 尤其 重要 在 理论 上 说 , 关于 个 别 观 察 值 的 总 体 分 
布 形式 通常 所 知 甚 少 .然而 , 如 下 面 将 要 证 明 的 , 极 值 分 布 内 有 很 
少 几 种 类 型 ,其 形式 与 原 数 据 的 总 体 分 布 关 系 不 大 . 

在 理论 上 说 ， 极 值 理 论 曾经 其 一 个 引起 不 少 统 计 学 者 注意 
的 有 兴趣 的 问题 . 不 少 人 , 其 中 包括 夭 Von Mises, Fréchet 和 
Fisher 这 样 的 知 省 学 者 ， 都 对 之 作出 过 和 贡献 而 由 TaereHEo 在 
1943 年 的 工作 总 其 大 成 

先 给 出 下 面 的 正式 定义 . 

定义 6.4.1, 设 2 …， 至。 为 抽 自 分 布 为 忆 的 总 体 中 抽出 
的 i 记 . 样本 ， | 

站 全 一 InaE (Ed 四) 及 是 四 一 min( 瑟 1 …， 下 . 
如 果 存 在 常数 m>0 及 加， 致 mm 瑟 四 十 加 以 分 布 收 敏 于 对 人 人， 出 
称 台 为 一 个 极 大 值 分 布 、 类 做 地 定义 极 小 值 分 布 。 它们 统称 
为 极 值 分 布 。 上 还 分 布 王 称 为 “ 底 分 布 ”。 

极 值 分 布 理论 的 基本 问题 如 下 ; 

1. 有 那些 分 布 可 以 作为 被 悄 分 布 ? 

2， 收 人 敦 于 某 种 特定 类 型 的 极 导 分布 的 条 件 ， 以 下 我 们 主要 
讨论 极 大 值 的 情况 , 然后 容易 将 鳍 果 转 化 于 极 小 值 ， 


= 所 


关于 问题 1， 如 对 底 分 布 不 加 限制 , 则 退化 分 布 可 作为 极 值 分 
布 ， 热 而 , 无 论 是 在 理论 上 和 实用 上 , 有 兴趣 的 是 概 值 分 布 迁 续 的 
情形 . 

为 了 叙述 极 值 理论 的 基本 定理 , 引进 下 面 的 概念 ， 两 个 
分 布 函数 5 和 称 为 是 同类 的 ， 若 存在 常数 s>0 友 已 至 
Fi (arf 三 Fo(w), 并 记 为 ~ 了 oa， 显然 , 这 关系 具有 自 反 、 对 
称 和 传递 的 性 质 ， 

定理 6.I.2( 极 值 分 布 的 三 天 类 型 ). 车 Go) 为 一 连续 极 值 
分 布 , 则 电 必 与 下 列 三 个 分 布 函数 之 一 同类 : 

Fis) =erp(—e), “~, 


Ga 人 -exp( 一 去) 当 s>0 (Go<0 时 为 0)， 


此 处 下 汪 0 为 参数 ， 
Gow) 一 exP《 一 《一 四 避 ， 当 ?<0， 作 基 0 时 为 刀 ， 
此 处 五 >0 为 参数 . 
人 ,GG 分 别称 为 第 I IT IE 名 极 值 分 布 . 
证 . 在 证 明 中 用 到 下 面 的 概率 论 事 实 : 若 当 nw-*oo 时 ， 叉 ,和 
如 下 as 十 加 分 别 依 分 布 收 敏 于 连续 分 布 到 个 和 时 人 此 处 co>0， 
贡 五 ~~G， 这 个 简单 事实 的 证 明 站 此 从 略 ( 参 看 [8], p. 208) . 
现 设 侣 为 连续 极 值 分 布 , 麻 分 布 为 了 了， 从 五 中 抽出 太 小 为 
mm 的 iia, 样本 ; 
五 1，,…， 于 【《 极 大 值 为 了 +)， 
.EP ny on 《 极 大 值 为 YF», 


芋 m_Dntly"… 玉 ma《 极 大 盾 为 了 mw)， 
让 ”mm 固定 而 使 n>co， 则 由 想 定 知 存 在 0 及 区, 致 
oF tad, > Go -rm, 
瑰 记 他 =maz (了 i …,， 了 w)， 则 
ca td = 了 ax (onF + on), 


Cr 


故 将 有 6 了 +d -一 Gm(w)， 另 一 方面 , 由 于 他 smax (六 1,*…'， 
了 mo) 有 cm 多 ao 一 > G()， 将 oa 了 十 6 写 为 

oP m+ ds = Ks CmoP mt Gnm) + H,. 
对 适当 选择 的 五 0 及 玖 。 于 十， 利用 在 征明 开 始 时 提 到 的 那个 
事实 ,可 知 存 在 mm>>0 及 pb， 弄 


Go (nD =G (mgt bm), m= 1, 3， (6.1.29 
以 下 分 两 个 情况 讨论 ， 
1* 存在 避 >1 至 gm 一 1， 这 时 
Gn (WD -个 人 十 gw. (6.1.24) 


由 此 知 tw) 不 能 取 0, 1 为 值 ， 不 然 , 设 4 为 使 CW) = 工 成 立 的 
多 的 下 确 界 ,由 于 Bm 到 0 (否则 他人) 只 取 0, 1 为 值 , 与 9 的 连续 
性 不 合 )。 车 b>>0 令 z=a 一 bw 于 人 6.1.24) 即 得 矛盾 若 5% 过 
0, ， 邻 4 一 在 即 得 了 矛盾， 这 证 明了 G(@) 不 取 工 为 值 , 同样 证 明 它 小 
取 人 0 为 值 ， 于 是 , 函数 
H(w) =10g(—1ogG (%)) 
有 意义 , 且 由 (6.1.24) 得 
Hiwtbn) = H{®) 十 log m. 
因 玫 , 车 记 
Hi = H(t — (og m/bn r= Hn) 一 Row 
则 五 1{%) 有 周期 bw, 因而 是 有 界 的 , 现在 我 们 注意 | 只 要 对 一 
个 m>1 有 om 一 1 出 对 一 其 mw>>1 有 am 一 1， 因 车 对 某 个 mw 有 
ow 天 1， 则 可 找到 到 w==awew' 十 bw， 这 时 由 6.1.28) ( 命 其 中 
的 m= 将 得 站 (的 一 6 (的 ， 责 肝癌 >1 知 和 (oo 只 能 为 0 
或 1, 与 上 面 已 证 明 的 侣 不 取 0, 工 为 值 的 事实 不 合 . 这 样 , 我 们 
证 明了 ; 对 一 切 名 > 二 隆 数 五 :to) 一 五 如 ) 一 hz 有 周期 5w、 册 
于 周期 函数 的 有 异性 , 这 显然 只 有 如 = 加 一 … 一 无 才 可 能 , 因而 函 
数 瑟 (一 hp x 有 周期 6%=10gm/ 有 m=2, 8 "…， 这 些 周期 
中 有 不 可 通 绚 的 (如 ,59)， 加 上 五 @) 的 连续 性 ， 就 证 明了 
五 (42) 一 x 可 等 于 一 常数 基因 而 


直上 


EP 


Iog (~ log (2)) 一 Mt 十 到 
这 解 出 Gr) =erp(—e™®). 
由 于 个 (Cw) 是 分 布 函 数 , 必 有 及 >0, 因而 GD) ~ 生 (0， 
2? 对 一 切 mw>1, 有 cml1， 这 时 不 失 普 记性 可 设 5 一 0 因 
为 , 令 凶 (9) 一 (一 相 ， 8 一 bw (qn 一 力 , 则 伯 ~GG, 而 
Gm) = e+, GHD) = Or (s+ , 
ams bm) = wt be 二 的. 
国 此 "十 二 一 在 {omz 十 bm 十 呈 ， 以 ww~8 代 和 燃 
"(0) = b+ (nn) . 
于 是 可 以 全 代替 安 来 进行 讨论 ， 由 Ge 人 一 (ans), 知 (0) 一 0 
或 G(@ 二 1, 分别 讨论 这 两 种 情况 : 
a， 他 (的 一 0， 我 们 来 证 明 : 当 wz>0 时 ,有 0<G(2) 过 1, 
先 设 mm>1， 若 存在 4>0 致 了 Ce) =0, 则 
GE 一 Go 一 0 Fase) = A" (mt) =0, », 
即 对 一 切 正 整 数 五 , 有 人 www) 一 0, 令 区 ->o0 得 出 矛盾 若 存 在 
v0, 致 嫌 (w7) 一 1 出 
Gram) 一 好 (or) 一 I， 因而 们 (w' am) 一 二 
与 上 类 似 的 推理 证 明 对 一 切 自 然 数 下 , 有 GCw'/a 同 一 1 令 五 一 
co, 利用 局 的 连续 性 得 避 C0) =1, 与 人 人 0) =0 的 假定 矛盾 , 完全 类 
似 的 方法 处 理 mm< 工 的 情况 . 
因此 , 函数 五 to) 一 log (一 Jog 人 (wm)) 在 0<z<eo 有 定义 , 且 
由 Go =G (amw) 得 
H(t) thogm—H (on). 
记 生 一 log qm/log mm (注意 和 举人 站 ,而 全 互 :(o = 于 (8) 一 log zl 
出 


(em Hans) — HP — Em 


~ H(z)+1og m2 -logm 


~ HC) -P= Hl). 


由 ar>>0 及 各 %1， 从 有 Hi1 (nt) 一 五 te) 于 0 过 % 之 co 不 难 推 知 ， 
及 1 (0) = 五 人 一 1l0g wilm 在 0<z*<ce 内 有 界 , 由 于 这 对 一 切 
2 成立 , 有 本 = 下 一 … 一 从 而 8m 一 m4， 所 以 五 ini) 一 五 :() 
对 一 切 sw>0 和 正 整数 mm， 因而 对 任意 两 个 严 台 数 mm, nn 有 
已 {( 甸 ] 可 = H, (nr = Hi (0) 
(no 一 吾 1(w) 由 在 五 mp) 一 瑟 1(2) 中 以 rw 民 z 得 出 )， 
但 ( 侍 ) 在 (0，co) 处 处 币 密 ,加 上 豆 : (w) 在 (0,o0) 的 连续 性 , 
知 五 1(z) 在 0<z<oo 为 一 常数 即 
Hilw) = Ee td, Oro0, 


太 而 人 (Ko erp(— ev), Owoo, 
由 G(oo)=1 知 lim w=0, 故 于 一 一 正 , 玉 >0, 再 将 @ 写 为 om 
得 

G(r) —exp(—() )~6, (2). 


bb. (0) 一 二 一切 与 情况 a 一样， 先 证 明 当 ><0 时 ， 有 0<< 
Q(z) < 二 作 耳 数 互 (w) 如 前 ， 最 后 得 到 Gtw) 一 ezp( 一 (一 由 如 ， 
一 oo<w<0, 此 处 下 >0, ee>>0， 显 然 , G 一 Gas， 定理 证 毕 ， 


《 玉 ) 各 型 极 值 分 布 的 吸引 场 (Domain of Attraotion} 


定 尽 如 .1.28， 设 码 1， 吕 2 … 为 抽 自 具 分 布下 的 总 体 的 iia, 
样本 , 车 存在 0 之 及 机 ， 致 当 woo 时 ，2r 工 四 十 du 焦 分 布 收 伍 
于 工 型 极 值 分 布 , 则 称 底 分 布 了 属于 i 型 分 布 的 吸引 场 . 

本 朋 的 目的 是 讨论 底 分 布 属于 各 型 极 值 分 布 的 吸引 场 的 条 
人 忻 ， 由 于 工 型 分 布 在 应 用 上 最 重要 , 我 们 对 之 进行 较 仔 细 的 讨论 。 
对 IL I 型 极 值 分 布 则 只 列 出 结 末 ， 

首先 证 明 由 FHexexso 提出 的 充分 必要 条 性 . 

定理 .1.3. 设 诬 分 布 卫 (w) 有 如 下 的 性 质 : 存在 ce<i 使 车 


vs 昨 瑟 呈 。 


四 (人 >m% 则 忆 在 z 点 连续 。 这 时 浆 属 于 工 型 极 值 分 布 的 吸引 场 
的 充 要 条 件 基 ,对 任何 % 一 ce<w<csc， 有 

lim n[1—F(wmt+-2)| 一 ce- (6.1.25) 
其 中 坊 和 ow 是 由 

Fl) =1—i, PF(wt)-1- 襄 (6.1.26) 
所 决定 。 当 定理 条 忻 满足 时 , 前 面 提 到 的 6 和 二 必 分 别 可 取 为 ox 
和 一 aw. 
证 1” 充分 性 
Pl (Xu <D -P(Xw mt ) (m+) 
由 舍 ,1.35) 知 lm FP(wm+ 2 )=l, 因此 由 (6.1.25) 
log Fr(wt EE)-nlog[1—(1—F(wm+ 色 ))] 
一 -n+0(D) [1~7(w+E)] 


一 oe 当 和 >o0. 


因而 Hm P lew CX mun) < 工 ) “exp(—e ™). 
这 证 明了 充分 性 . 


23” 沉 要 性 设 存 在 四 >0 及 邮 致 ， 
lim P (oh (天 四 一 册 ) < 四 


—lim F* (w+ )=oxp(—e), 
这 时 必 有 


lim (t+ 


) = (6.1.27) 
lim 1 log Es (1-z(w+ 各 -)] i 
注意 到 (6.1.2) ,此 式 相当 于 
+. 5 


lim a[1~F(w+ 了 多) es, (6.1.28) 


现 设 二 om 由 个 ,1.26) 定义 ,我 们 证 明 , 必 有 
1 I 十 帮 , 
ty — t+ En/ ns 加 十 去 一 负 于 一 {6.1.29) 


其 中 er 一 0，8 一 0， 当 ”一 ceo， 事实 上 , 若 当 9roo 时 swr20， 则 可 
取出 一 子 序列 {eoj， 致 sw>>E>0 对 一 切 或 su 必 一 S<0 对 一 
切 1， 为 确定 计 且 不 失 普 遍 性 ， 设 ezze>0 对 一 切中 这 时 由 
{6,1.28) 有 
1=%[1—F (vw)] =—n[1— FQ + es/0)] 
<n[l— Fe tia) re <i. 

这 个 矛盾 证 明了 lim ss 一 0， 完 全 类 似 前 方法 证 明 lim 各 一 0 现 
在 由 (6.1.29) 解 出 

om 一 Cay 1+ — 80) = CI, th >0, 


而 Ke) 
量 扰 与 (于 (wy 一 wr) 有 同一 之 极限 分 布 , 即 
Im Fr (wt 2 ) -exp(—e®),. 


仿照 前 面 推出 @.1.28) 的 方法 , 由 此 式 得 出 (6.1.2 辐 , 这 证 明了 
必要 性 .定理 证 毕 . 

这 个 定理 在 应 用 上 的 不 便 之 处 在 于 , 要 从 (6.1.26) 决 定 妃 和 
ow 以 及 验证 6.1.25), 都 不 容易 , 然而 : 在 分 布 了 有 连续 密度 的 
场合 , 只 种 决定 如 就 驶 了 . 

引 理 6.1.1i. 若 五 绝对 连续 于 wa>>0, 对 某 个 四 且 f(w) = 
情人 在 ww>a 时 连续 , 而 了 (a) < 之 1， 则 当 定 理 6.1.3 中 的 充分 条， 


件 成 立时 , 必 有 lim -Fe EF 一 二 因而 m 可 以 用 wa) 代替 . 


证 . 设 (6.1.235) 成 立 ， 其 中 如， mm 是 由 (6.1.26) 决定 ， 由 
定理 6.1.3 证 明 过 程 不 难看 出 , 在 这 个 假定 于 , 有 


€ 
1+7s 


* 555 


sma oi (w+ 2 ) 一 和 本 
于 jz] <4 内 一 致 ,对 任何 4<ce。 于 是 有 
"[7 (wt )—Ps) ] -1 入 ct+o(D]， (6.1.30) 


此 处 0 忆 )->0， 当 mw>oo, 一 致 地 于 |z| 所 所 内, 但 当 n 辕 定时 ， 有 
《 取 " 充分 大 , 致 矶 > 20) 


n[F (wt ) -Fle ]—n Lf Gm) +5CD]e/an 


此 处 6 人 一 六 当 生 固定 而 x->0， 此 式 与 (8.1.30) 结合 得 
nflf Gu to s/o —1—e [Ll+o(l)]. 
此 式 两 边 除 以 mm 先 令 jx0, 后 令 >o0, 注意 到 o(1) 对 4 在 有 界 
范围 内 的 一 致 性 , 即 得 
lim nf my = lim 1—e* 一 工 
ne tn -+0 作 
引 理 证 毕 . 
Von Mises 提供 了 一 个 豚 引 于 工 型 极 值 分 布 的 ， 较 易 验 证 的 
充分 条 件 . 
定理 6.1.&4， 设 底 蔓 布 了 (zm) 满足 条 件 ， 
1* 当 yx 充分 大 时 ， 8"(w) 存在 有 限 ; 
23? 当 4 充分 大 时 , f(w) 一 一人 > 
1 Ri—Fis 
3 lm [+ -0, 
网 了 属于 工 更 极 信 分 布 的 吸引 场 。 
证 .定义 他 和 eu: 


Pb) —1—T, onf (un). 
由 条 件 3" 知 un>o0， 当 ->o0. 
将 也 (w) 写 为 1 一 于 [L 一 下 的 ]， 可 知 车 = 随 m 变 化 ， 且 
n[1 一 了 (2)] 保持 有 界 , 必 有 


= bE » 


~-log 可 (四 = —nlog [于 -waG Fe)) ] 


-nfi—F(e)] +0( 二 ) 
特别 ,在 lm n[ 呈 一眼 (wm)] 存在 有 限 非 0 时 , 由 此 进一步 得 到 
log (—log FC2)) —log [ln (1— P(e)]+0(T), (6.1.81) 


记 Go (Go 一 log (tI 一 了 (92)]， 则 因 6) =0, 在 上 式 成 立 的 条 件 
下 ,将 有 


lm log[— log F* (0)1 ~lim 6 从 一 一 lim | gO) oh, 


此 处 9 国 一 一 的 的 一 工 蕊 二， 现 取 
Stat y/o | 外 实生 天 cc 
我 们 来 证 明 , 这 样 定义 的 随 m 变化 的 z 满足 使 (6.1,31) 成 立 的 条 
件 ， 注 意 nf (un) -9gGu), 故 
Glo) = gO og, 
在 以 如 和 2 为 端点 的 区 间 内 ， 以 让 一 ts 十 9 /0 代入 此 式 , 得 


~ = 
Gu 十 go a ye) Cw) yt), (6.1.32) 
必 有 lim /gn)] 一 1 为 证 此 , 先 注意 当 mw >ce 时 ,有 >oo， 
些 因 前 已 指出 lim ww = o%, 放 欲 证 6->oo， 具 须 证 % 一 wm 十 Y/an> 


0, 当 %%->o0. 但 


4 = 
> 一 TU EK Cn). 


此 处 下 (0 一 w 一 47g (0)， 由 假定 8° 及 9 (人 前 表达 式 , 知 
lim K'(W) =1, 
放下 (的 一 oo, 当 w>co, 再 由 Wi->co 即 知 sm> 天 Go) 一 co 于 是 证 
明了 >oo， 现 在 写 
s BET * 


ge) /9 -1+gGw -由 [各 (C 苛 ) 


各 在 Ww 和 之 间 ， 因而 lim &1~ es， 由 于 
[Em) lo = lt | A/on= A/glum), 


知 jg 车 一 同安 4. 
于 是 由 Er->co 及 假定 3°, 得 lim (人 /1gGm)) -二 由 此 以 有 


(6.1.82), 得 


A 了 二 
lim Gu(g = limG,( t+ yy lim -I —y, 
因而 Hm n[1~—F(%)] = lim expl, (2)] =, 


有 限 旦 不 为 0， 于 是 由 06.1.31) 得 
lim 1og (— log F* (wnt+y/0n)) 一 一 纺 


即 lim 所 (二 y/om) 一 exp( 一 0?) 这 就 完成 了 定理 的 证 明 ， 
例 6.1.i1. 很 容易 验证 Von Miaes 的 条 件 对 负 指 数 分 布 


克扣- 和 < 

1—e™”, 2>0 
成 立 ， 现 在 我 们 验证 ,对 五 (2) = 二 (2) 也 成 立 , 此 处 西 为 久 (0, 1) 
的 分 布 耳 数 , 其 密度 记 为 g(x) .条件 1°, 23 显然 , 又 


六 [二 $2 ={—g (0) + [LB] pw) s}/g? (0) 
1 DSo)le 
IC， (6.1.83) 
因为 当 = 充分 大 时 ,有 


(E-)o 1 Tp. 
由 (6.1.83) 知 定理 6.1.4 的 条 件 3° 成 立 . 
我 们 留 给 读者 自己 去 验证 ,车 玉 (o) = 了 (2)， 当 o>0 时 ， 有 
Oonst. exp《 一 ow 的 形状 , 则 定理 的 条 件 必 成 立 , 此 处 a>0， 这 
包括 了 指数 分 布 , 正 态 分 布 ，Weiball 分 布 及 Gamma 分 布 等 
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Taemeggo 也 给 出 了 属于 开 , ITIL 型 极 值 分 布 的 吸引 场 的 充 要 
条 人 性. 这 比 工 型 简单 ， 
定理 6.1.5. 底 分 布 丈 属于 Ti 型 极 信 分 布 的 吸引 场 的 充 要 
条 件 为 
1° (vw) 之 1， 对 一切 %. 
2°” 在 在 下 >0, 使 对 任何 0, 有 
1— Fle) _ 
eee Tor) 
定理 6.1.6， 座 分 布 了 属于 IIH 敢 极 值 分 布 的 吸引 场 的 充分 
必要 条 忻 为 ， 
1” 存 在 有 限 的 @, 致 Pt)=1, F(@) <1 当 2<ay 
2” 对 这 个 有 长 >0 存在 ,使 对 任何 。 有 
1— Ff{erto) or 
sio 1l—Fiz+tw)})  * 
证 明 从 略 . 


(六 ) 极 小 慎 的 情况 


现在 我 们 指出 ， 航 小 值 的 极限 分 布 问题 很 容易 转化 到 极 大 值 
的 情况 . 
设 下 1 …， 下 ,为 iid., 玉 1 的 分 布 为 下 (有), 了 …, 了 ,为 
iid., 了 1 的 分 布 与 一 及 1 的 分 布 同 , 即 
FD = PE =P(— TD 
=P(Xi> DI- Fy 人 O00. 
这 时 显然 ， 于 a) 的 分 布 与 一 了 ww 的 分 布 同 ， 这样 应 用 定 带 6.1.2 


立即 得 出 : 若 os 卫 十 0 一 > Ga 连续 (os>0), 负 分 布 函数 G C2) 
必 与 下 面 三 种 类 型 之 一 属于 一 类 ; 
工 弄 ， 印 (人 @) 一 1 一 G( 一 从 二 1 一 exp( 一 仆 ; 
于 型 : a (5) 一 工 一 全 3 (一 号 
i1—exp(— (~ 号, 当 «<0, 
-| 1, 当 wz 


此 处 下 之 0 为 参数 ; 

五 工 型 (3s (2) =1—G{—2) 

0, 当 w<0, 
-| 1 一 exp( 一 2 ， 当 这 0， 

属于 各 型 极 值 分 布 的 条 件 ， 自 然 地 由 相应 的 极 无 型 的 条 件 转 
化 而 得 ， 我 们 将 工 型 的 结果 列 述 于 下 . 

定理 6.1.8 . 设 麻 芬 布 五 (wz) 有 如 下 的 性 质 ; 存在 s>0, 使 车 
所 (@) <e， 则 也 在 # 点 连续 ， 这 时 万 属于 鲍 的 吸引 场 的 充 要 条 
件 是 , 对 任何 “有 
lim mF Ct w/a = 

此 处 志和 a 由 关系 式 
FG) ~ 二 E( 人 =- 二)- 辣 

所 决定 , 而 当 定理 条 件 满足 时 , 有 吼 (Ya 一 忆 ) 一 > Gi (w)， 又 敬 
万 满足 与 引 理 6.1.1 中 的 条 件 相 当 的 条 件 ， 则 可 以 用 nf Ge) 
代 蔡 ， 

Von Miseg 定理 在 极 小 借 的 情况 有 形式 ， 

定理 6.1. 各 . 设 底 分 布 到 满足 条 件 

1” 当 x 充分 接近 一 oo 时 , 8?" (wm) 存在 有 限 ; 

2。 当 = 充分 接近 co 时, (2) 一 了 '(%) >>0, 

。 1 dr Fw) 

3 lim 各 | Fe ]-。% 

出厂 属于 Qi(w) 的 豚 引 场 . 


(七 )Cramer 的 方法 


HH. Oramer 提出 了 一 个 寻求 极 值 分 布 的 方法 ， 此 法 基于 下 面 
的 引 理 . 
引 理 6.1.2. 设 了 1, …, 耶 , 是 拍 育 具 连 续 分 布 FP 的 总 体 的 
iia. 样本 , 记 
t=n [lm F(TEe0)], MR CT), =0, 1, 2, .**, 
"660* 


则 对 固定 的 到 当 m%w=>o0 时 , 所 和 人 都 依 分 布 收 敏 于 分 布 吾 !(o， 
此 处 五 gz 有 密度 
| 0, ve 0, 
和 人 = Hs Co) -| 区 
特别 , 对 1=0， 得 到 06=%n 和 一 了 (zw)] 和 加 一 2B (way) 的 极限 分 
布 交 贫 指 数 分 布 
P(g) -| Pt 
1—e?, wD. 

证 ， 根据 引 理 3.5.3, 车 以 本 志 … 志 Ds 记 自 巴 (0, 中 
抽出 的 大 小 为 nw 的 次 序 样本 , 则 五 (Xay 的 分 布 与 一样 。 依 
(6.1. 人 ,UD; 的 密 庶 毅 数 为 

! i 
fi -| rer “UD, deveD, 
0, 其 它 引 
由 此 得 出 mr 一 ns 的 密度 函数 为 


YY i 并 一 人 
Got -| Qi- 名) + Os 
0, 其 它 2. 
令 m>o%, 得 0 v0 
he) ~ lm gu 一 | ve /sl, v0, 
这 证 有 明了 引 理 关于 % 的 部 分 , 关于 点 的 部 分 完全 神似 。 
拿 于 来 讨论 。 若 记 
Y=—n[i— F(Rn], 
而 能 出 此 方程 解 出 互 o= 名 他 JJ)， 则 可 利用 了 之 极 跟 分 布 求 
三 之 极限 分 布 ， 我 们 举 一 个 例子 来 说 明 这 个 方法 . 
例 6.1.2. 设 分布 函 数 了 了 (%) 满足 条 件 
1— 了 Fw 一 [+o(D)] 玉 2 6xp( 一 cw) ， 当 王充 分 大 ， 
{6.1.84) 
此 处 E>0, e>0, o>0, ao 一 0D， 当 2 >co。 
方程 t=n[1l— P(e)] 
E01» 


府 结 为 log[1 olD] +log 下 十 及 Joga 一 caz 一 1ogE 一 10g 入 
—tw t+ Blogv=— lognt+lopgt—log E+d,. .1.35) 
此 处 md. 一 0, 一 臻 地 于 闸 <E 所 性 <oo 肉 . 
我 们 来 证 明 ; 此 方程 之 解 为 ， 
2=[(Jognt+Bloglogn—logé tlog EBloge+s,) /|. 
(6.1.36) 
其 中 lim mw 一 0 一 致 地 于 而 <E<< 天 <<oo。 实际 上 ,由 (6.1.34) 可 


知 ， 在 的 上 述 范 围 内 ， 内 要 nw 充分 大 ， 必 有 维 一 的 + 满足 
(6.1.85).， 这 个 “对 于 适当 的 s 总 可 表 为 (6.1.36) 的 形式 . 以 
此 环绕 入 怡 .1.85) 的 左边 


~logn— bloglogn+lgé—log E+ loge— e, 
B10pl £ = 及 
十 log| log n+ 本 log log n— log €+ log 去 二 loget-s.| 


-log oe —logn+ logé— log E+ (6.1.37) 


Flog[lognt bt log logn—log¢+logK—E log c+ es] 


一 及 8 Bn 
和 log log n+ log (1+0(D) + ee) 


此 处 lim oCD -0 一 致 好 于 抽 <s< 3 内 ， 于 是 由 (6.1.37) 得 


n+ Eiog[1 +o) + ] = (6.1.38) 


现在 可 以 证 明 lim e。 0 | 注意 , 在 以 上 讨论 中 避 可 以 随 n 变化 (但 
让 << 术 )， 因 此 证 明 lim en~0 就 包含 了 其 一 至 性]. 车 sr 
则 可 以 找到 子 序列 ga 一 0， 若 8 关 士 所 ， 则 在 个 江 .38) 中 发 


" w 


为 mw 再 令 针 rco, 将 得 4a= 0 矛盾 若 e= 土 co, 则 因 1og |1+ 
o(D + 二 | 的 数量 级 比 sn 低 ， 将 得 二 co~0， 这样 ， 证 明了 
lim ss = 人 0., 

现 分 别 以 Ys 和 于 ww 代 (6.1.86) 中 的 二 和 和 并 记 


hlogn+ 汪 log logn+log EK -Elog 0, 


| 
oe eT 
-{(&)"- Ee +o 伍 外 
故 人 ~—logY,+ owo(). 


这 说 明 上 式 左边 的 变量 ， 当 ww->oo 时 的 极限 分 布 与 一 ]og 了 。 的 极 
限 分 布 一 致 ， 由 于 了 。 的 极限 分 布 为 
Ge -人 [二 
1—e™’, sw>0., 
知 一 Jog 了 ,的 极限 分 布 函数 为 定理 6.1.2 中 的 后 (人 办， 即 I 型 极 
”大 值 分 布 . 
这 个 例子 显示 出 Gramer 方法 比 之 Von Mises 定理 之 一 有 力 
处 , 在 表达 式 (6.1.34) 中 ,对 oll) 的 性 质 并 无 特殊 要 求 ， 因 而 无 
法 证 实 (6.1.84) 中 的 函数 下 (oo) 满足 Von Mises 定理 中 的 条 人 忻 
3 .Gramer 方法 还 可 用 于 考虑 次 极 值 细 下 ， 瑟 mo) 的 极限 分 
布 问题 . 


4 极 值 分 布 参数 的 估计 


将 极 值 理论 用 于 实际 问题 的 一 般 税 式 如 下 ， 设 有 了 数据 
了 蔗 1 …, 也 %, 我 们 将 它 看 成 来 自 一 个 具 分 布 玉 的 总 体 .、 假定 也 
属于 某 型 极 值 分 布 的 吸引 场 .这 一 点 的 确定 需要 考虑 问题 的 理论 
和 实际 背景 ， 为 确定 计 , 设 了 属于 1 型 极 大 值 分 布 的 吸引 场 ， 


= 63 =» 


ee 
mr em me dh a a 


把 琶 5 …， 互 % 按 若 壮 个 一 组 分 成 许多 组 .在 有 了 时间 注 的 数 
据 中 ， 通 常 是 把 接连 一 段 时 间 的 观察 数据 放 入 一 组 设 一 共用 
个 组 ,每 组 中 挑 出 最 大 的 那 一 个 ， 设 为 芷 1,，…，, 这 ,， 我 们 假定 每 
一 组 中 的 数据 重 足 够 多 ， 因 此 , 除去 一 个 线性 变换 外 ， 每 个 焉 ;都 
可 认为 近 做 地 服从 工 型 极 值 分 布 、 这 等 于 说 ， 瑟 1， …， 玉 是 从 有 
分 布 函 数 

Foalt) —exp(—e “+ )) ‘6.1.39) 
的 总 体 中 抽出 的 iit. 样本 , 为 了 回答 种 种 有 实际 兴趣 的 问题 , 首先 
二 要 由 于，…， 王 。 去 估计 参数 和 必 

出 于 这 个 问题 的 重要 性 ， 在 文献 中 提出 的 估计 法 不 下 十 余 种 
之 多 , 以 下 挑 出 几 种 作 一 简略 的 介绍 . 

1. 用 样本 2 分 位 数 ， 以 2 一 世代 入 (6.1.890, 得 

Hs) 一 6EP( 一 6 一 上 一 0.83679 一 0 
妓 芭 为 总 体 的 -分 位 数 , 故 可 用 样本 各- 分 位 数 6, 合计 之 ,又 
Pa (ur I) ~—exp(—e =0.6922 .=p;, 


故 可 用 总 估计 2z+ 工 


计 . 
2. 最 小 二 乘法 (线性 回归 法 )、 这 方法 基于 这 样 一 个 事实 
设 项 &… 友 芝 (ma 为 取 自 具 连 续 分 布 卫 的 总 体 的 次 序 样本 ， 划 


一 样 去 证 


明 (Di1<<… 志 Us 是 取 自 忆 (0, 的 次 序 样本 )。， 作 为 一 种 近似 , 以 
Fw 代入 (6.1.39), 得 


， 结合 上 述 的 估计 各,, 就 可 得 到 a 的 信 


一 exp( 一 exe)， 卫生 
因而 a(Xw- 夫 =a -ou 
~ -log (~log fT) -oe i—1, on, 
土 式 左右 两 边 当然 不 恰好 相等 , 但 我 们 可 记 ou = 了 5 一 上 络 


全 与 全 生 


eu 一 局 而 把 它 看 作 一 个 一 元 线性 回归 : 
本 二 04 一 人 十 忆 ， b= 

用 最 小 二 乘法 估计 a 和 =ow， 此 法 方便 的 地 方 是 级 =0m 只 与 
m, 二 有 关 而 与 样本 无 关 .。 如 果 有 极 值 概率 纸 ， 则 估计 可 通过 作 图 
得 出 . 

3。 极 太 似 然 千 计 法 。 以 上 两 个 方法 使 用 简单 ,但 效率 较 低 ， 
用 极 大 似 然 估 计 可 提高 精度 , 但 需要 更 复杂 的 计算 ， 

似 然 函 数 为 


工 ~ arexp| 2 ex oxp| —o 之 { 瑟 :一 多 上 ， 
市 log 开 一 ?0loga 一 ax( 和 一 内 一 人 /so)， 


2 放 re/ 攻 rn) 
得 用 用 L 
2 eI pp, 安 Xerzy/ 袜 cx 十 工 一 马 . 
由 第 二 方程 解 出 a 代入 第 一 方程 决定 ww， 由 第 二 方程 决定 a 自然 
需 用 数值 方法 - 
在 结束 本 节 前 我 们 提 到 , 关于 次 序 统 计量 , 尚 有 所 谓 边 项 的 分 
布 问题 . 这 是 指 一 个 或 若干 个 这 样 的 工 oo 的 极限 分 布 问题 ， 其 中 


lm 之 -也 但 一 久 >co( 相 应 地 ,对 ->0 但 针 *co)、 关 于 这 方面 可 
参看 班 成 (< 数学 学 报 ? 1964 年 ， 694 页 } 和 Caproa 的 工作 ， 

另 一 个 在 文献 中 有 很 多 研究 的 问题 其 次 序 统 计量 的 线性 组 合 
的 极限 分 布 问题 ， 在 此 引述 Moore(ann，Math. Btatist.19868, Pp. 
263) 的 一 个 铺 果 如 下 ， 设 及 1,…， 斑 。 为 iid.,， XY 的 分 布 为 耳 
妨 ( 玉 1) 存在 有 限 ， 设 三 由 立正 为 宇 0 下 的 次 序 统 
计量 , 而 
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1 电 
n(x 
又 及 Et 记 了 1 …， 之 的 经 验 分 布 函 数 . 

“定理 .1.7. 设 了 四 在 [0, 科 上 除 可 能 有 有 限 个 第 一 种 间 
断 点 , …， ow 外 处 处 连续 , 在 由 4，…， 0 所 分 割 成 的 [0, 局 的 
每 个 子 区 间 中 ，v (wm) 连续 ( 除 端 点 外 ) 且 有 界 变 益 ， 则 当 % 一 oo 
时 ， 


Vn(T.— | mrCPsG)aps 人 O) > NO, 9. 
其 中 假定 va 一 oo, 而 
RA A OB 


一 0 


§ 6.3. 也 统 计量 


(一 ) 下 -统计 量 的 定义 及 其 方差 


设 儿 为 一 分 布 族 , 8(7) 为 定义 于 .多 上 的 取 有 限 实 舍 的 画 
数 ， 设 四 1，…， 也 为 记 . 样本 ， 芝 1 的 分 布 到 属于 分 布 族 . 多 ， 
需要 由 三 2 ……， 了 革 , 去 估计 91 下 之 值 . 

以 互 四 之 … 刍 下风 记忆 1 生 的 次 序 统 计量 ， 根 据 第 一 
章 , 不论 多 如 何 , 《总 ap …'， 站 mm) 总 构成 一 个 充分 统计 量 , 而 在 
加 上 很 徽 弱 的 条 人 忻 后 , 它 也 是 一 个 完全 统计 重 ， 今后 我 们 假定 多 
满足 这 些 条 件 ， 这 时 根据 定理 2.1.1, 若 中 as， …， ww) 为 一 个 只 
依赖 于 《至 oy， …， 开 om) 的 (也 就 是 说 ，7(ea，…， 闸 ) 为 所 会 变量 
的 对 称 函 数 ) 无 偏 估 计 , 则 它 也 其 85 的 MVUE 估计 . 

例如 , 设 多 为 一 切 其 均 慎 存在 有 限 的 一 维 分 布 族 , 8{) = 分 


布 卫 的 均值 ， 则 旺 ~ 二 光斑 ,是 6() 的 无 偏 信 计 ， 生 时 关于 


2 …， mo 是 对 称 的 , 因此 , 它 就 是 8(F) 的 MVDB， 同样 , 若 多 
荐 一 切 其 二 阶 矩 存在 有 限 的 一 维 分 布 , 而 894 了 ) = 分 布 古 的 方差 ， 


则 不 难 验证 , 9- 二 六 (CE 一 "就 是 0(P) 的 MVUE. 


定理 3.1. 1 也 给 出 了 在 已 知 一 个 无 偏 信 计 时 构 阁 MVUB 的 
方法 . 拿 到 这 里 来 , 车 "(wy，…; wm) 满足 条 件 
Erlg (XI 0(F), 对 任何 FE (6.2.1) 
出 
Bly (X11, "y 及 | (于 "yg 昼 (ny) ] 


1 ft 和 
nm mm PX Hom), (6.2.2) 


为 9C8) 的 MVUE， 此 处 写 袁 示 求 和 的 范围 为 
{ en, wi Cm) FO 7 Cm 两 两 不 同 ， 1 $$ 二 1， ey 人 时 
容易 看 出 , 若 站 满足 (6.2. 儿 ,而 令 


CE 一 二 Too ou， 


这 里 求 和 的 范围 廊 及 人 … mm) 的 全 部 置换 (人 …, 各 )， 出 
PCD mn) 为 员 ， xm 的 对 称 函 数 , 且 
[p(T (FP), 对 任何 了 了 EF， 
这 时 (6.2.2) 可 以 改写 为 
Us—U (FX, *, ED Blp(E, ~ En) 的 在 ap 下 tm 


-人 ,Be Xo). (6.2.3) 
本 


定义 6.2.1. 设 耶 J,, …， 于 为 样本 , yp 为 和, …， 如 的 对 称 
盖 数 ， 其 由 68.2. 如 所 定义 的 一 (了 1，…， 匡 。) 称 为 (基于 样 
本 也 1，-…, 之 ,的 )U- 统 计量 , gq 称 为 此 0- 统 计量 的 被 (Kernel). 

U- 统 计量 是 Hoaffding 在 其 1948 年 的 工作 中 所 引进 的 (网 
Adrm. Ma 级 . Statist. (1948)，p-293) .Hoeffding 本 人 及 其 他 学 者 
在 以 后 作 了 很 多 研究 ， 这 个 统计 量 现 已 成 为 非 参数 统计 中 应 用 很 
广 的 一 个 重要 统计 量 ， 本 节 我 们 将 叙述 关于 [~ 统计 量 的 一 些 基 
本 事实 及 其 某 些 应 用 . 在 上 文中 , 我 们 是 从 估计 的 观点 引进 Zr- 绕 
计量 ， 实 际 上 , 0- 统 计量 在 假设 检验 中 也 有 重要 应 用 ， 在 以 下 ， 
我 们 总 假定 有 4， zo … 为 iid,, 其 公共 分布 为 了 EZ (注意 也 在 
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此 不 必 是 一 维 的 ). 

我 们 已 经 知道 ， 再 pr(Iw 一 8《8)。 为 了 计算 品 , 的 方差 ,引进 

函数 
Pea “1 0) — Br Wey I or "Lm)] 


= ps, oo, mso oa (oers) dF (0m)» 


0—0, 1, -, mm, (6.2.4) 
go 理解 为 百 r[p (1 三 m1， 而 gm 一 P， 最 热 
Er[gpo (X11, *, Xo)]=0(8), (6.2.5) 
假定 
Erfgp Ry 7 Rn) EH, (6.2.6) 
则 不 难 证 明 
Er[ge (ER1, 在] 之 型 . (6.2.7) 


事实 上 , 若 记 王 一 9 Sa， 号 由 ， 则 
Po ry 的 | ~ Er[Y |X1, 0 三 串 ， 
所 以 CX 7 2) = {Br[lY | Ri oo, Ro Br[LY’|X, 
广 ,]， 从 而 
Erlgoe (X13, 7, Ro)] SBr [Br(TS:|T, pe 天 四] 
— Erp(Y™) NM. 
这 样 ,可 以 定义 
o2~— Varp [go E12, **%, Bo)], 0—1, , m, (6.2.8) 
在 计算 Varr (DC 时 , 不 失 普 记性 显然 可 候 定 bz =0. 这 时 
oa = Vars (Us) 


-(") ZHrlp Eo, °°, To) PARa, ,Ham)], 


6.2.0) 
3! 求 和 的 范围 是 1 之 之 a 大 记 二 A 兵 夺 加 在 
(6.2.9) 厂 边 任 取 一 项 ,车 足 标 (oa ……， on) 和 CB，…，Bw) 没有 
一 个 公共 的 ， 则 该 项 为 0、 车 有 6 人 公共 足 标 ， 则 由 及 4，…， 于。 
为 认 . 及 gq 的 对 称 性 ， 可 以 取 一 个 代表 人 性 项 盏 区 (GE … 和。 
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Pr 


下 mi 为 4 P(E i 在 sw] 来 考察 , 这 里 三 
组 足 标 
人 (8 
中 , 没有 一 个 相同 的 。 因此 , 注意 242D 一 0, 有 
Br[ly Rs, Rs, Ho, Kao) PRI Ro, Ho, a, .)] 
— Er{Er pp| 1, *, Ko)}— Brlge (KR, Ho)] 一 az. 
1 Te TT— nN 

又 在 和 之 中 ,是 标 怡 有 o 个 公共 的 那 种 项 ， 共有 (外 站 | 


[a 3 一 下 


个 , 这 可 以 如 下 计算 ， {en 四 Com 有 (2) 种 取 法 ， 取 定 (oa "yy 


am) 后 , 那 公共 的 o 个 足 标 必 在 其 中 , 故 有 的 下 二 这 o 个 足 


标 也 是 (8，…，Bm) 的 一 部 分 , (B41，…，Bm) 中 其 余 的 mw 一 o 个 足 
标 ， 必 须 从 全 部 % 个 尾 标 中 除 由， em 外 的 那 部 分 去 挑 ， 故 有 


(| 种 取 法 . 


3 一 全 


根据 以 上 的 讨论 我 们 得 到 
TS 
了 e111 如 i 
-人 (六 D3 的 | (6.2.10) 
9 r=l1 8 TY 一 是 


由 个 .3.10) 立即 得 出 
lim no? (UD) = mmo}. (6.2.11) 


注意 ,cz，c "AD 等 与 分 布 有 关 , 在 记 叶 中 没有 宕 出 ， 


二) 了 一 统计 量 的 渐 近 正 态 性 
当 % 国 定时 , U- 统 计量 的 精确 分 布 ,除了 极 个 别 的 例外 情况 ， 
是 无 法 求 得 的 .然而 ，Hoeffding 证 明了 ， 当 样本 大 小 和 >co 时 ， 
在 很 一 般 的 条 人 忻 下 Da 的 分 布 渐 和 近 于 正 态 分 布 . 
定理 6.2.1。 设 (6.2.6) 成 立 且 at>0, 则 当 % >co 时 ， 
全 本 本息 全 


MAR ON /mod) SyNO, 1 (6.2.12) 
证 . 不 失 普 遍 性 可 假定 8( 所 =0, 令 
1 es， 
1 (6.2.13) 
因为 ;， Ta, 为 iid., gr CF1) PAGCAR "+ 也 为 i 记 .， 其 均值 为 
8 让) =0, 而 方 关 吕 非 0 有限、 由 古典 中 心 极限 定理 ,有 
y/o -全 > NCO, 1), 
当 %>oo， 故 为 证 明 (6.2.1 人 ,只 需 证 
lim Er[V nn Us,—mr ]2 一 0， (8.3.14) 


但 由 (6.2.11) 及 (6.2.18), 注意 到 9(F) =0, 有 
Rr Cv nD, 一 my,) ” 
~ Bp (nD) +m Ep?) 一 2 nm Br (UY nn) 
一 mac 十 0( 二 ) 十 Mao om /下 再 (CT {6.2.1D 
为 计算 召 (D。. 了 ,), 考察 一 个 代表 项 pCUopr CX)，D 表达 式 的 
各 项 中 , 凡 不 会 下 1 的 , 与 p(X1) 相 习 后 有 均值 0， 含 且 ; 的 , 即 
形 如 pg (了 1，。 玉 a …, 入 ww )) 的 项 (这 里 om,…, om.1 都 不 为 才 , 则 有 
BelolT, 人 ys 人 p(T ] 
— Erfgp| X11}— Erigi( FX) =o03, 
而 在 U0。 的 表达 式 中 , 含 ;的 项 从 有 |{ ”_ ) 个 , 放 


Er (Up XD) -(") (2 jz | 


Br -EVD)) -os 


以 此 代入 二.2.15)， 得 
Br(V RU -ma (£)%, 3 jo00, 
这 证 明了 (6.2.14)， 因 而 证 明了 本 定理 ， 
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本 定理 在 证 明 中 使 用 的 技巧 是 造 出 一 个 在 均 方 意义 下 最 捷 近 

于 避 , 的 线性 独立 和 了 ,， 因 而 可 将 问题 转化 为 独立 和 的 中 心 极限 

定理 .Hajek ( 见 do 开拓. Btwtist.，1868,，p. 325) 将 这 个 方法 
提成 一 般 的 形式 ,并 称 之 为 投影 原则 ， 

在 有 些 问题 中 ， 需 要 (6.2.12) 中 的 收 伍 性 对 于 某 个 分 布 族 

多 "内 的 分 布 如 有 一 致 性 , 也 就 是 说 , 藻 以 Qeaskz) 记 当 样本 大 小 

为 到 .大 1 的 分 布 为 下 时 ,Mw (一 8 下 )f(eon 的 分 布 函数 , 则 

Him [sup sup IG — B21] =0, (6.2.186) 


由 定理 6.2.1 的 证 明 过 程 中 看 出 ，(6.2.16) 的 成 立 取 决 于 两 件 
事 ， 一 基 〈6.2 .14) 的 收 仑 性 对 了 FE 多 ' 有 一 至 性 .由 o?(D0% 的 
公式 可 知 ,这 只 需 存在 一 个 型 二 co, 使 6.2.6) 对 任何 FE 风 ' 成 
立 就 行 ， 另 一 件 事 就 是 由 《6.2.1) 定义 的 了 对 也 EF', 当 wr> 


oo 时, 一 至 地 有 了 s/o1 -二 > (0, 妨 ， 清 足 这 个 要 求 的 条 件 可 以 
由 Berry-lsseen 定理 (参看 [条 ，[3]) 得 到 , 例如 : 
GO Bo |p (X10) — OF) |?*+9 RL, 
对 一 切 了 EF'， 这 里 反 砚 与 无 关 , 而 8>0 是 某 一 常数 . 
利用 定理 6.2.1 的 证 明 方法 , 很 容易 得 出 下 述 较 一 般 的 结果 ， 
设 yg 中 ，… 9 为 区 个 核 ， BD，…, UI 为 这 些 核 作出 的 基干 
同一 组 样本 有 1，…， 及 ,的 有 个 可 -统计 其， 又 记 
OF) By tp (R, RT)], 
pi (0) 一 机 [pro (s, Fa, + Kd), 
oj—=Qov pH CE), pK Y, 
LN ?=1, 2, ry 五 ， 
二 一 {on) HX, 
则 当 wyoe 时 ， 
VRLOP OB /my 7, TOO me] 
-了 > NO, 4). 
当然 , 这 里 假定 了 所 有 的 核 wD，…，gce 都 满足 条 件 (6.2.6). 


"571» 


(三 ) 统计 量 的 相合 性 


在 (一 ) 中 ，D- 统 计量 Zu 是 作为 0) 的 MVUE 而 提出 来 
的 ， 在 (二 ) 中 , 我 们 在 条 件 (6.2.6) 之 下 , 证 明了 Dr 的 渐 近 正 态 
性 ， 这 一 点 保证 了 在 6.2. 成 立时 , Us。 为 8(F) 的 弱 相 合 鸽 


计 , 即 D0。 一 >9 (8) ， 实际 上 , 我 们 证 明了 [U6 为 9CF) 的 均 方 相 
会 售 计 , 因为 Do) -8(), 且 有 o?(U) -0( 二 ) 


关于 Vs 的 强 相 合 性 , 下 面 是 一 个 初等 结果 ， 
定理 6.2.2. 若 条 件 (6.2.6) 满足 , 则 
Pr (lim U,=0(F)) =1. 


事实 上 , 可 以 证 明 更 强 的 结果 . 
Prlimni’ U0) -D1 .6.2.1 


证 本 定理 的 证 明 依 赖 了 于 Komoropos 的 一 个 定理 《 见 [3 ， 
P-238); 设 到 1， 到 9 为 独 开 随机 变量 序列 ， 
EBX) =—0, Var(XD) 一 2 d=1, 2, », 


又 如 个 oo 而 且 训 o3/ 碟 <oo, 则 和 0 a.e. 当 >o0， 


在 证 明定 理 6.3.1 的 过 程 中 证 明了 (不 失 普 遍 性 仍 没 (fF) = 
0) 


BV RU mY o(+), 


由 此 可 知 wD。n"mYJ*-0 (ts ) 


因此 之 吾 ns” Us— mY ,<0, 
由 概率 论 中 周知 的 定理 ,有 


1 
lim[n’ “UU,—n mY,] —0, a.0, 


[| 


于是, 欲 证 (6.2.17, 只 需 证 
ss 


让 1 
lim nT, =lim YY p (XO /ni ~0, a.e. 
Nae Hao 并 


而 这 是 上 文 提 到 的 Kozmroropon 定理 的 显然 推论 ， 定 理 证 举 . 

有 兴趣 的 是 ，Hoeffding 在 只 假定 By [p(X1…， 也] 一 
08{ 玉 ) 存在 有 限 的 条 件 下 证 明了 0 鸭 DB) 的 强 相合 估计 . 

本 书 作者 进一步 研究 了 这 个 问题 ， 在 假定 

五 Fp[|gp 区 0 对 基 个 5, 06<1 

的 条 性 下 ,证 明了 : 

IT” Er(|U,—0CF) | 一 DO 

2° lm w/t (Us —O(F)) —0, ae- 
Hoeffding 和 本 书 作者 的 上 述 结 果 揭 示 了 0- 统计 量 与 独 空 和 的 
相似 性 . 


《四 )o 的 估计 


如 果 吉 利用 定理 6.2.1 来 作 98(F) 的 大 样本 区 间 估计 , 则 必 
须 通 过 样本 对 o3 作 一 估计 才 行 ， 这 可 以 如 下 作 到 : 注意 
RF) or Erlpi (m1)], 
而 这 个 量 的 MVUE 为 


0 [ pi )@em-D ( 7 中 


‘Dip Re 这 oa) PLT, "Rg,), 

324 表示 求 和 的 范围 为 1 攻 <amn 1 所 芝 人 Bn 世 np 县 
Ca mw) 和 (B14,，…，Bw) 中 恰 有 一 个 公共 足 标 。 要 证 Us 为 
(FF) 十 gi 的 MVUE, 只 须 注意 0 为 乞 ， …， 五 s 的 对 称 画 数 ， 
且 .再 ma 一 到 [9 三 1]- . 

然后 ,我 们 找 信 ( 到 的 一 个 佑 计 , 例如 D5, 则 Un 一 DD 就 可 作 
海 o 的 估计 ， 用 8 估计 六 (如 没有 无 偏 性 ， 为 得 到 如 (F) 的 
一 个 MVUE, 可 考虑 

PFD Kam) PE EA) Em on), 
将 其 对 称 化 (一 如 在 (一 ) 中 由 久 得 出 内 得 核 贡 (六 1 互 o， 


皇后 7 号 = 


由 它 作 出 前 好 -统计 量 个 .是 PC 的 MVUE, 因此 , 得 到 的 
MVUE 为 .0 


(五 ) 多 组 祥 本 的 0" 统计 量 


以 上 关于 一 组 样本 的 口 -统计 基 理 论 可 以 显然 地 推广 到 多 绢 
样本 的 情况 .为 书写 简单 计 , 以 两 组 为 例 . 

设 有 限 实 什 函 数 9 一 p (fy Cm 县 Ym) 基于 
sm 和 及 ，…，g 分 别 对 称 , 即 

PP ss Vim Ye Yims) = Pp{oy ,Tn YI Ym 
对 (1, 3 …, oa 的 任何 置换 (各 bp， 及 寺 ， 2，…，Ya) 
前 任何 鸽 换 【7 ja go ， 设 下 三 s 和 了 pp Pm 分 
别 联 自 其 分 布 和 如 的 总 体 ,而 让 , G 都 属于 分 布 族 实则 

一 


-1 
| ?1 各 
| 和 ) ( ma | 1 em 
lub ps 


(和 
称 为 (基于 样本 瑟 :，…， 互 si 了 1 …,， 了 5 的) 以 为 核 的 U- 统 
计量 .和 若 记 

Bralp (1, 0 时 了 +， “3 Vn) =0(F, 9), 
则 Um 为 6, 的 无 篇 估计 ， 车 坟 六 W 夺 所 旦 mw 和 
了 所 分 别 记 节 1，…， 玉 和 本 ,的 次 序 统 计 
量 , 则 不 论 分 布 族 .多 如 何 ， 可 以 证 明 这 统计 量 是 充分 的 ， 方 法 与 
一 组 样本 的 情况 完全 一 样 , 又 车 对 .多 加 上 轻微 的 条 件 , 则 可 以 证 
明 这 统计 量 也 是 完全 的 (这 个 事实 已 在 定理 1.6.8 中 不 加 证 明 地 
指出 过 )。， 以 后 总 假定 .多 满足 这 些 条 件 ， 这 时 , 根据 定理 2.1.1, 
Don 是 8CF, 的 的 MVYUE. 
引进 函数 
goes 
= Er, olg (wm, ,ps 旦 4 a mn 
,7 Ye Vor sy ws ]， 


= 74 


61 一作 天， 9213 C9 = 0 I + Ma, 
并 记 Oz, = Vars,alpee, (Xi, “ey 下 0 yu, ery Yo ), 
则 与 证 明 (6.2.10) 的 方法 一 样 ,得 到 
0 (Usn) — Varp,a(Un, mw) 


-1l m mm — 
-2 Sa) 
人 全 
由 此 不 难得 到 ， me ?gco 时 ， 
ra oh +0( 误 )+0( 去 ) 
与 定理 6.2.1 完全 类 似 , 有 下 面 的 定理; 
定理 6.3.3， 记 丰 一生 于。 设 和 一 cc， orrco 且 短 -一 
0<X<di， 又 ci 和 oa 不 同时 为 名 则 有 
VE (Us 0, 印 ) > NCO, co 


其 中 何 :一 2 和 十 


证 明 的 方法 与 定理 6.2.1 完全 类 似 ， 令 CF, 人 一 0, 定义 
Yx=~vVN 和 名 gao 十 万 了 pr, 


先 证 明 Hm Er,a[ VNUs Yxl?=0, 


由 此 可 知 VHDUhs, 与 了 x 有 相同 的 极限 和 分布 ， 然 后 直接 用 中 心 极 
限定 理 得 出 了 x 的 极限 分 布 ， 我 们 把 这 个 证 表 过 程 留 给 读者 自己 
去 完成 . 
双关 于 cgs 和 ca 的 估计 , 与 一 组 样本 的 情况 一 样 , 先 注意 
[OF, G+ oio= Br alpiotX)], 
从 而 得 出 中 十 的 ] Tai 的 MYUE 为 
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wl) ono (oe 


"1 PCE "ry a Va, yy Fa) 
* 仙 《下 mi 四 下 co Ya "ey Ya), 
这 里 求 和 的 范围 是 


1 

1 Bn 1 < 和 5 
且 (om) 和 加， et 中 恰 有 一 个 公共 的 , 而 (8,，…， 
BoJ 及 (B84 …，Bino) 中 没有 公共 的 .得 到 中 (BF, 的 ]?-+o3 后 ， 
按 与 (四) 一样 的 办 法 , 可 得 o 多 的 MVUE。， 同样 得 到 咯 的 
MYUT. 

以 上 事实 推广 到 多 于 两 组 的 样本 的 方式 , 是 不 言 自明 的 , 

下 面 我 们 来 说 明 C- 统 计量 理论 在 两 样本 问题 中 前 应 用 . 

设 下 2 了 1 了 和 和 也 ,的 意义 如 前 ， 我们 要 
检验 假设 五 :了 F 三 G, 即 两 组 样本 来 自 具 同 一 分 布 的 总 体 , 这 个 问 
题 叫 两 样本 向 题 ,在 第 三 章 中 提 到 的 Caapaoa 定理 ， 也 是 为 了 解 
决 这 个 两 样本 问题 页 提出 的 .我们 以 前 处 理 过 的 情况 症 假 定 下 ， 
好 分 别 为 站 (ww 59 和 万全 o ,这 时 两 样本 问题 归结 为 检验 = 
6, 这 自然 是 一 个 典型 的 参数 统计 向 题 . 

用 也- 统计 量 的 理论 处 理 两 样本 问题 ,一般 途径 如 下 : 先 选 定 
一 个 适当 的 8 的， 当 避 一 人 时 ,97， 克 ) 等 于 一 已 知 常数 w， 
于 是 8(, 与 4 的 仿 蓉 ， 可 以 作为 也 , 久 之 间 的 差 是 的 一 个 度 
量 . 设法 找到 一 个 作为 0(， 99 的 无 偏 悟 计 的 五 统计 量 Us 而 
将 检验 建立 在 Usw, 与 # 的 偏差 大 小 的 基础 上 ， 在 此 , 9CF,， G 的 
选择 有 相当 的 灵活 性 , 它 可 以 针对 我 们 所 设想 的 对 立 假设 来 选择 . 
这 时 , 所 造 出 的 答 验 对 于 鉴别 这 一 类 对 立 假设 较 灵 , 而 对 别 的 对 立 
假设 则 可 能 根本 不 可 用 .下面 将 通过 人 恒 子 解释 这 一 点 . 

例 6.2.1。 设 于 ,了 独立 , 王 , 了 的 分 布 为 了 9, 了 ,如 属 
于 一 维 连 续 分 布 族 多 考 碟 

OF, 0 = Pye > A), (6.2.18) 
B76. 


易 兄 0(P, = [FldG (oe), 


因而 04， F) 一 1/2， 所 以 , 9CP，G) 与 豆 的 仿 差 , 可 作为 F,G 


的 差异 的 一 个 度量 ， 
6(F， 6 的 定义 自然 地 提示 了 一 个 作为 其 无 偏 估计 的 口 - 综 
计量 , 这 就 是 以 
1, Gv 
pes 仿 -| Bh 
为 核 的 矿 -统计 重 ， 注意 ?是 两 组 变量 fo} 和 g} 的 函数 , 每 组 内 
包含 的 变量 个 数 是 ma 一 ms 一 1, 因而 自然 地 是 对 称 的 , 以 p 为 核 的 
D- 统 计量 是 
DJ 二 二 { 开 < 的 组 数 ,= 了 mu 9 了 
将 全 部 奉 本 下 :，,…， 互 wi 了 ，.…， 了 。 排 成 一 个 次 序 , 设 为 
GBF MN ~ + Wa, 
起 于 分 布 连续 , 可 以 不 考 串 21,-…，2w 中 有 相同 的 情况 ， 设 了 /~ 
2 则 称 BB 为了; (在 合 拌 本 及 …， 政 了 i，…, 了。 中 ) 的 秩 ， 
不 难看 出 
{<T7 的 组 通 , 症 一 站 1 
十 
-六 a DD 


1 人 加 Ras 十 1 
因而 Dn 


这 个 统计 量 的 实 大 性 部 分 是 部 已, 即 第 二 组 样本 的 秩 和 ，Wiloo- 


x0n 站 1945 年 ( 见 Biometrics BuR.,1,p.80) 首次 提出 这 个 统计 量 
必 为 检验 两 样本 假设 的 工具 ， 因 此 上 述 秩 和 常 称 为 Wilooxon 统 
计划, 相应 的 检验 称 为 Wilooxon 检验 ， 
要 决定 waw 的 极限 分 布 , 须 算 抽 Gin Chi， 易 够 
pio 1) —1— Gv), 
Por YW1) — Fg), 


B77s 


于 是 得 到 
到 et 人 GO] 一 人 HG (1 Fe) 
-Po0-eG| 
-2 人 三 (0) [1— 0 (2)]aG (ey 


=2| PF (I-00)1a0 (人 
同样 地 
Brotpha FO] = P00) -1—2| Fo)G dF GD， 


这 样 就 可 以 算出 o3o, o%， 通过 本, G 来 表达 特别 , 当 了 一 G 时 ， 


有 ， .| 
Brr[pi(eD] ~2| “0 —o) do— 竺 , 


Bes gh PD] -1-2| dw 于 . 


8 
因而 oh 一 o8 -= 总- (3) -大作 一 G)， 由 定理 6.2.3 知 , 当 
时， 


(Do 十) > NO, on. 


2 


此 处 次 王 和 十 Pa~>oo， 4 >， 0<<I， 而 
N 


oa 一 工 工 1 .1. 1 


A 1 IA 1 1a- 
可 以 用 沽 代入 , 得 到 
ET 
VS QU) 一 > NO, 1). 
将 其 转化 到 著 和 统计 是 R 一 总 BB 得 


2R -mam tratl) IT wo,1 6.2.19 
rE 一 一 N(0, 1), ( 2， 》 


"TB 


当 F~G. 
要 利用 极限 分 布 (6.2.19) 来 定 出 关于 假设 了 =G 的 检验 , 首 
先 征明 确 , 从 这 个 统计 量 的 来 源 看 , 它 只 适合 于 对 立 假设 是 属于 于 
种 情况 , 即 当 卫 关 GF 时, 8(F,， 0) 不 为 豆 , 且 媚 G 的 “下 离 愈 天， 
9(F, 9) 与 于 相去 水 愈 远 ,例如 ,对 立 假设 G 为 
(fF 从 ， 存 在 40, 致 下 (人 一 由 =G() (6.23.20) 
就 属于 这 种 情况 . 这 表 东 玉 , 8 只 有 一 个 位 置 参 数 之 差 . 园 为 广 
泛 的 一 类 对 立 假设 是 
(的 : 玉 夫 Gy 古人 <G (a) 对 一 切 儿 或: 
再 六 他， 机 (全 之 G (wp) 对 一 切 @. (8.2.21) 
还 要 分 别 单 边 和 双边 的 情况 ; 如 果 我 们 限于 形 如 (6.2.20) 的 对 立 
假设 旦 4>0( 或 (6.2.21) 的 情况 , 且 了 (之 G(s)), 则 否定 域 可 
取 为 i 


RF mt mt + ns, (6.2.22) 
(zo 出 安 (3) 1 一 & 定 出 )， 邯 限于 4<0 (或 (6.2.21) 的 情况 且 
了 (加) 乏 攻 (二 )， 则 香 定 域 可 取 为 

Rmtnt1) — a + Za, 


而 在 双 过 的 情况 则 到 


Ia 一 于 za (和 十 名 二 四 | > Cost ne) tas, 


这 个 检验 基 关 样本 性 质 的 {对 较 小 的 各 ,mz 有 表 可 查 ), 它 上 只 适用 
于 土 茄 提 到 的 那 类 对 立 假设 ， 上 比方 说 ,对 形 如 
(CF, OO: Fr}, 0<4dF1 
的 对 立 假 恋 ( 它 们 只 有 刻度 上 的 不 同 ), 用 这 个 检验 就 不 行 . 
例 6.2,.2.。 即 困 我 们 需要 一 个 能 午 对 所 有 对 立 假设 的 两 样 
本 检验 , 可 以 取 


br 6) = | LF) -G01 TO +, 


" S19. 


因为 显然 有 
OF, 0 -0 Fe=0. 


从 原则 上 说 , 基于 这 个 指标 而 构造 的 两 样本 检验 , 对 任何 下 才 全 的 
情况 多 少 有 些 鉴 别 力 ， 
我 们 来 证 明 


CF, Gy -去 ACF, GO) -去 (6.2.23) 


其 中 

AF, G) = Pr,o (maztT, Ao) <min(Fy, Fa)y 

+ Protmaz(tTy, Fa) <min(A, TH)), 

这 里 于 1， 玉 si 了; 独立 , 工 1， 了 玉 有 分 布下, 了 1, 了 有 分 布 
， 为 了 证 明 {6.3.23)， 福 意 max( 玉 !， 玉 2)，min (Xt, 于)， 
ma fi 了 2 ，min (Fy, 了 sy) 的 分 布 暗 数 依 次 为 

下 1— (I— FD)’, G8, 1— CU—G)’,. 
于 是 得 到 

a, 的 -| [LG C17) + 全 [1 F(w)]00° (6) 


-2 ( 厂 GP (wo) dF (四 + 信友 人 62 人 GD)) 
-- 入 (GD ALF Cw) +G (8)] 

-2+|[ a OTD) 
~2f tr) TH) (Fg) 
Ga 2 

~2+1 一 对 +26(F， oD 于 二 20( 忆 DD. 


这 证 明了 (6.2.28). 因 为 
F=0 © 4(F, 9 ~. 


二 晤 吕 亿 时 


La 


检验 可 建立 在 4(F, 9) 与 各 的 偏差 的 基础 上 ，4(P，G) 的 定义 


自然 地 提示 了 一 个 作为 其 无 偏 估 计 的 UU- 统计 量 ,这 就 是 以 
i, 车 mAX (#1, Za) <min 4， ya) ? 或 
{ri Das Wn) a) 一 MAX (1 Yo) <min (aa 9) ， 


0， 其 它 . 
我 们 有 


go 人 — [1—G (OJ Po) + [GaP 
-Ga [LF (Cw)] +| .8 (War. (6.2.24) 

同 法 可 写 出 gor)， 在 了 = 时 , quo( 玉 1) 和 pm (Fy) 的 方差 可 
算出 ， 因 而 能 定 出 极限 分 布 方差 o? 的 值 ， 据 此 即 可 定 出 大 样本 检 
验 的 界限 .我 们 把 这 一 切 留 给 读者 作为 练习 . 

一 些 作者 将 1- 统 计量 的 理论 推广 到 更 复杂 的 情况 ， 例 如 样 
本 Xt， 及 a,, … 独立 但 不 必 同 分 布 , 甚至 可 以 不 独立 , 以 及 有 限 总 
体 抽样 的 情况 ， 还 有 品 统计 量 与 随机 过 程 的 联系 , 其 极限 性 质 的 
更 精细 的 理论 等 ， 这 些 结果 要 到 专门 文献 中 去 找 。 


$6.3， 秩 次 统计 量 
《一 ) 引言 


设 有 样本 互 b …， 时 mm 它 可 以 是 从 一 个 总 体 抽出 的 ， 也 可 以 
是 从 多 个 总 体 中 抽出 的 样本 的 合 样 本 . [i 
记 其 次 译 统 计量 .如果 于 ;= 下 eo, 则 称 有 BR; 为 下 (在 至 1， 到 
中 ) 的 牧 ，( 刀 ,…, 五 四 构成 一 个 统计 量 . 

这 个 统计 量 只 保留 了 各 观察 值 的 大 小 鞠 系 的 信息 ， 具 体 数值 
部 分 都 于 以 丢弃 乍 一 看 可 能 觉得 这 样 丢失 的 信息 过 多 因而 意义 
不 大 . 事实 正好 相反 , 这 个 统计 量 是 非 参 数 统计 中 永 用 至 为 广泛 的 
一 类 统计 量 ， 凡是 建立 在 这 个 统计 量 的 基础 上 的 方法 订 统 称 之 为 
秩 方 法 ， 例 6.2.1 中 的 Wilooxon 检验 就 是 一 个 秩 方 法 ， 本 节 的 


-BBl 


- ev we Em ma .二 aa tm tu sin mca iaarer 由 ra ve 


旧 的 是 介绍 一 类 最 广泛 使 用 的 秩 统 计 基 的 分 析 理 论 的 基础 ， 

秩 方 法 之 所 以 得 到 广泛 使 用 ， 其 原因 从 韭 参 数 统 计 的 本 质 去 
思考 也 不 难 理解 . 因为 在 非 参 数 统计 中 ,对 分 布 族 的 假设 极为 一 
级 .这 个 一 般 性 鸽 祥 本 中 的 一 些 具体 数量 关系 成 为 表面 的 . 非 本 
质 人 性 的 东西 而 只 有 那些 最 稳固 的 , 一般 性 的 关系 , 如 天 小 关系 之 
类 , 闭 能 成 为 排 断 的 合理 直 础 当然， 让 上 所 述 只 能 作为 帮助 思 举 
之 用 而 不 能 绝对 地 去 理解 )， 这 还 可 以 从 不 变性 的 观点 来 说 明 ， 
比方 拿 商 样本 问题 洲 说 , 设 及 1,，…， 症 。 和 和 了 1， …',， 了 了, 分别 是 从 
其 分 布 人 中 提出 的 得. 样本 ， 要 检验 到 = 他 设 关 的 是 任 一 
定义 于 【一 se，ec) 的 连续 严 增 冰 数 , 作 变 搞 

太一 及 (有 Ph, 了 =， 
| (6.3.17 
经 过 这 变换 ， 斑 ;, 了 了; 的 分 布 相应 地 变 为 
Fw) = Fh)), Or) = Gh)). 
因此 在 五 直 G6 时 有 人 =， 反之 亦 热 , 车 fr, GF 连续 ， 则 如 站 亦 
然 ， 所 以 ,在 形 如 (6.8. 了 1) 的 变换 的 群 之 下 , 检验 问题 三 保持 
不 变 ， 按 不 变 原 则 , 可 以 考虑 在 这 合群 下 不 变 的 检验 . 但 显然 在 变 
换 伞 雪 .3 汪 之 于 ,要 大 不 变量 喜 是 全 样本 (下 1，…， 丰 了 ，，…， 
了 的 悉 《RN，…， or ， 这 就 是 说 , 如 只 局 限于 考虑 不 变 检 验 . 
中 除了 基于 和 铁 的 检验 以 外 ， 共 它 都 不 在 考虑 之 列 . 由 于 在 非 参数 
统计 问题 中 , 在 变换 群 46.3.1) (或 类 似 性 质 的 群 } 之 下 有 不 变性 是 
常见 的 现象 , 秩 统计 量 香 到 广泛 应 用 也 就 不 足 为 奇 了 . 

上 芷 于 秩 的 统计 方法 ， 在 系统 的 秩 分 布 理论 发 展 以 前 就 已 散 
见 在 文献 牛 ， 象 Hotolling 和 Pabst 的 基于 秩 的 狐 立 性 检验 ， 
Spearman 的 称 相 沁 系 数 ， 上 文 提 到 的 Wileoxon 检验 ， 以 及 著名 
的 符 导 检验 等 ,都 可 算 作 这 一 类 1944 年 Wald 和 Wolfowitz 的 
结案 ( 见 $ 6.4( 三 )), 1848 年 Hotelling 关于 UU- 统 计量 的 结果 ， 
在 比较 简单 的 情况 下 解决 了 关于 秩 统 计量 的 极限 分 布 的 某 些 问 
题 . 那 时 以 来 ， 一 些 学 者 在 这 方面 作 了 一 些 工作 ， 但 取得 突破 性 
进展 的 ， 村 等 我 们 在 下 面 将 详细 介绍 的 Chernot 和 Savage 1958 


上 


年 的 工作 ， 这 个 工作 解决 了 一 类 线性 牧 统 计 员 的 极限 分 布 问 题 . 
所 谓 线性 和 钦 统 计量 , 是 指 形 如 
Si = cran (BR) (6.3.2) 

的 秩 统 计量 . 这 电 Cwly “人 为 已 知 常数 ， 而 ex 为 定 交 在 世 ， 

… 轨 } 上 的 已 知 函 数 . 1968 年 Hajek 在 一 项 开创 性 工作 ( 见 
Anm. Ma 访 . Sigtiss., 1968，p. 325) 中 又 把 线性 秩 统 计量 的 极限 
分 布 理 论 作 了 重 六 的 推进 .在 这 期 间 吉 到 现在 为 止 , 文献 中 出 现 了 
天 量 的 基于 这 些 工 作 的 讨论 , 抒 这 些 基 本 结果 用 于 种 种 具体 问题 . 

秩 统 计量 常 称 为 秩 次 统计 量 (Rank Order Btatistios)， 


(二 ) Chernof-Savage 的 两 样本 秩 次 统计 量 


1958 年 Chernoff 和 Bavage 在 其 一 项 著名 的 工作 ( 见 Anm. 
Math. Statist., 19858, p，972) 中 ， 讨 论 了 一 般 线 性 秩 统 计量 
人 .3.2 的 一 个 重要 的 特殊 情况 ,在 较 一 般 的 条 件 下 建立 了 其 极 良 
定理 ,这 个 工作 成为 以 后 一 系列 研究 的 出 发 点 和 基础 . 

设 五 | 王 m 和 于 9 分别 为 取 自 具 务 布 吾 好 的 
总 体 的 iia. 样本。 假定 琅 . 为 一 维 连续 分 布 . 记 入 =mmrn， 
z= 二 /NN. Chernoff 和 Savage 考虑 (6.3. 人 中 cm 一 … 一 Cam 一 工 
Ci md1 一 4 一心 的 情况 . 记 ax (如 4 序 十 工 


并 引进 一 个 无 关 宏 引 的 常数 因子 二 闻 后 , 得 统计 全 


EE 


) k=1, 2, ,WN 


1 RR 
| (WT) (6.3.8) 
我 们 回 忆 ， Ri, "yp mw 是 于 "> nm 在 合 祥 本 在 3 ry 站 wy 


Fa，…， 了。 中 的 获 . 

Jr 现在 只 在 再 和 了 ，…， 9 这 如 个 点 上 有 定义 (到 
J (再 和 -or 的 ax(D，…, ax (入) 是 给 定 的 已 知 数 )， 将 其 
拓展 于 (0, 了， 


se 


Vw(2) 一 gn( 且 ， 当 < i 上 二 1 多 …， 入 ， 


Tro) =an(N), 3 Hi 
叉 以 Fw) 和 Ganto 分 别 记 样 本 《Xi …， 了) 和 C1 了) 
的 经 验 分 布 陡 数 , 而 

Hy (8) 一 hw Pn lw) + (1— Nw) Gu (a) 
不 难看 出 吾 w (0 即 鸭 合 样本 (1,1， 革 m， 了 ,了 3,) 的 经 验 分 
布 函 数 . 这 时 可 将 (6.3.3) 改写 为 
mr 三 天 [je (6.3.40) 
读者 容易 验证 .3. 久 和 (6.3. 和 9 确 是 一 致 的 ， 

引进 这 种 统计 量 的 目的 是 在 于 检验 两 样本 上 换 设 =G. 在 
Chsrnoft-Savage 讨论 一 般 形 式 (6.3.3 之 前 , 文献 中 已 出 现 了 一 
系列 这 类 特殊 形式 的 统计 量 , 如 

1 ， Wiloeoxon 检验 ，wy (CR) 二 此 

2. Fisher—Yates 检验 ，twy(E) 一 吾 ( 下 wtD) 这 里 下 wa 袜 … 吧 
于 ww 是 取 自 交 49, 14 的 大 小 为 趣 的 次 序 样本 ; 

3，Wan dor Waerder 检验 ，ay (局 -G(T ) D1 (g) 
是 访 (0, 1) 的 分 布 函 数 旬 的 反 国 数 ; 


之 1 


4，Ansari-Bradley 检验 ，awv (0 = | | 
5， Mood 检验 ，ay (及 一 (二 一下) ， 
等 等 。 其 中 前 三 个 是 针对 位 置 参 数 不 同 的 对 立 假 设 而 设 , 后 二 者 


是 针对 刻度 参数 不 同 的 对 立 假设 而 设 . 

Chernoff 和 Savage 证 明了 在 一 定 的 条 件 下 , 统计 量 Ty( 经 适 
当 规 则 化 后 ) 渐 近 于 正 态 分 布 , 1967 年 Uovindarajulu 等 将 这 些 条 
件 作 了 较 实 质 性 的 改进 ， 以 证 我们 先 秘 述 这 个 结 闪 . 

假定 

《a) 存在 定义 于 (0, 刁 的 不 为 常数 的 画 数 Cu， 至 


"Ged. 


lim Jy (0) 一 了 人 
对 任何 xE (0, 了 )， 


® [L(y Br) (HT Bro) lame) 


- 翅 3 [> (a XI -7( 于 WI ]-%0™. 

(0) JIOWD | EI], 0<u<d i~0, 1 
此 处 jy ( 风 一 (7 一 站 (证 为 一 与 无 关 的 常数 , 而 
s>>0 条 件 (0) 的 更 精确 的 提 法 是 : yo 在 任 一 区 间 [e, 工 一 可 
《>0) 上 绝对 连续 ,而 条 忻 (0) 中 i 一 1 的 部 分 理解 为 在 工 测度 


下 于 (0, 了 D 区 间 内 &.8. 成 立 , 


定理 6.8.1. (Qhernoff-Savage-Covindaraiulu-Le Gam-Ra- 
ghavachari)， 在 假定 QD)，(h)，(《0) 之 下 , 设 了 ,全 连续 , mp 一 cc， 


moo0, 且 使 从 一 xx 固定 不 变 , 则 有 
~VN Sep to, D 


此 处 
pr ~ { TLE (oaF (o). 
其 中 
Ho) 一 az 了 十 但- Ga， 
而 


03%=—2(1—Ay) [je (w, WEF (wp) dF (y) 


+ 和 [Fe ag (oe)aG (wy) }, 


假定 cx 六 0 此 处 
D— {tw, 人 1 一 co<2<s<ecoj， 
区 人力 一 和 人 GIT EH) TH WW)), 


ep ee ep er he 


(6.3.5) 


(6.3 .6 


(6.8.7) 


Pls, WP L-PPT HOIT HD). (6.3.11) 
注 。 假定 jx 与 y 无 关 是 不 便 的 . 但 以 后 我 们 将 取消 这 个 慨 
定 , 而 只 须 设 ; 存在 xo，0< ja 习 亏 ， 致 
WA 一 Mo， 对 一 切 六， (6.3.12) 
以 后 ‰ 就 理解 为 这 个 意义 、 在 本 定理 条 件 下 , 本 来 /Jw 和 0% 都 与 
无 关 , 但 考虑 到 适应 Xx 可 隐语 变化 (这 时 吾 (o 也 与 W 有 关 )， 
将 其 添上 中 标 1 
关于 本 定理 的 条 件 , (a) 一 般 问题 不 大 , 特别 ,有 时 yw 与 叉 无 
关 , 这 时 (a)，(b) 自然 成 立 . 又 我 们 注意 到 , 将 T; 滋 一 个 常数 因子 
不 影响 其 性 质 ， 故 .7x 也 可 容许 有 一 个 常数 因子 的 自由 ， 例 如 ,在 
Wilooxon 检验 的 请 况 本 有 Jo 一 [( 节 十 芒 辐 ， 这 时 lim J 人 


将 不 存在 . 但 可 改 为 Vvz to = 了 《六 十 D 加 /W 这 时 lim Jy 人 一世 


0<%<1J， 蜂 重要 的 假定 是 (60), Chernoff 和 Bavage 1958 年 的 工 
作假 定 了 "tw) 在 在 而 将 条 人 忻 (0) 加强 为 i=0, 1, 2. Covinda- 
rajaiu 等 在 1967 年 ( 风 Proc, of Berkeryy Sympasiwm, Vol. I,p, 
609) 将 其 改进 为 上 夯 的 形式 . 

又 在 条 件 (b) 中 涉及 记号 0%pCN-Y)， 一般 , 说 随机 变量 也 ~ 
op (J (ND)), 是 措 [CN)] -12 一 > 0 当 >oo， 因 此 ,0s(DD 识 
是 指 了 一 > 0, 当 ->oo0， 

本 定理 证 明 过 程 大 致 是 ， 先 将 Ty 分 解 成 一 个 线性 主要 部 分 
及 其 它 剩 余部 分 之 和 ，， 征明 线性 部 分 有 正 麻 极限 , 而 剩余 部 分 当 
入 很 大 时 可 和 扰 贴 不计， 这 与 了 Hoeffiding 关于 DC- 统计 量 的 渐 近 正 
态 件 定理 如 出 一 略 ， 且 也 是 Hajek 的 投影 原则 的 一 个 具体 例 证 ， 
然而 在 这 里 ， 关 于 苛 余 部 分 的 处 理 比 口 -统计 其 的 情况 复杂 得 多 ， 
为 了 清楚 超 兄 ,我 们 将 分 成 几 段 来 证 明 这 个 定理 , 先 在 下 一 段 处 理 
主要 的 线性 部 分 , 再 在 以 后 几 妈 中 分 别处 理 各 剩余 项 , 这 中 间 涉 及 
一 些 绝 致 的 分 析 推 理 。 为 了 不 打 断 主要 线段 ， 读 者 在 初 读 时 可 暂 
寻 路 去 以 下 《本 ) 一 CS) 这 肯 段 。 


.SB 。 


(三 ) Ty 的 主要 部分 的 渐 近 正 态 性 
将 Ty 时 六 
2 人 | ms] -7 Hr Hs lap le) 


-| 二 ls (0) |dFn (ew), 


* Frs Ge) | 分 角 为 


J He) = ITH Ce) + [Hw)— HT LH (eo)] 
Ht 4 | 
a a pre, 7 Fs) 
THI (Re) ~ ne 


并 在 此 起 有 边 前 两 项 六 ds 的 积分 中 ,通过 表 dP。 一 4(Fs 一 本 十 
a 分 解 为 两 项 , 最 后 得 到 分 解 式 
一 pr 上 可 二 Ba 二 > Os, (6.8.18) 
其 中 pew 即 (6.3. 久 ,而 
By) LH (ed Fake) — Fle)), 


Has | Lx) -HII LH dF), 
1 H, CY TL Cp) ds), 
Ox= Es) HITEH dPnla) — P(e)), 


ow=) 7 [yr 8) |- J [H(z)] 


本 | i Hx(s) — HC) )7’ CH (a)1)arae), 


c= -7 四 es 


8 


我 们 约定 , 在 以 下 凡 遇 到 记号 开 ， 就 是 指 一 个 不 焦 驴 于 任何 变 景 
的 有 限 常数 , 但 每 次 出 现时 其 值 不 必 相同 ， 由 (6.3.7) 及 0<)o< 
hx 一 0 之 1， 知 
Fl EKEH(D, dF (vy < EdaH {es), 
1—F(m) «FLL~H()], 
Gm EH(, do <KEaH (ww), 
1- 人 <E[l— He)]. 
由 此 得 (用 条 件 (6)) 
axl<) TH (IT EAH (Ce) 


(6.8.14) 


| AH) 
-—” [HAH 


-kf [so (4-0)] -irdr 00. 


因而 wx 是 有 意 闵 的 .以 下 在 证 明 过 程 中 会 看 出 吕 也 有 意义 ， 
性 选 me 纺 0< 五 (< 二 定义 
BO 一 TIEHOIGD, 0H < 
了 (6.3.15) 
Br (Cw) -7 [HOAF DD), 0H <1. 


根据 条 件 ko) 及 (6.3.14), 昂 见 BC%) 和 "(Cw) 在 集 久 一 {z: 0 过 
互 (o) <1} 上 有 有 意义、 我 们 来 证 明 : 存在 >0， 至 
E[[BCXD) | EM, BULB"(YD IT EM 0, 

(6.3.16) 

这 里 他 1, 了 i 分别 有 分 布 和 G、 事实 上 ,由 于 有 {fz. 0 一 了 Co) < 

I}Ce&, 有 了 (了 EW =1 放 上 8B( 革 ) 以 本 率 为 1 有 意义 . 又 由 条 

件 (0) 及 (6.3.14)， 

IB | <E IHD G -HO Ge) 


EIN -HY (6.8.17) 


* S88 


百 [| B (XU | 3+9 |] < 开 | [H (wy) {1 _-H (w) Var g pF em) 
< | [HO 代 一 百人 (全 习 于 379490940 了 再 (0 
一 gh ed- 的 【一 十 /十 榴 [3 二 本) dv. 


先 部 汪 0 充分 小 致 (到 -8 }(2+8) <1, 即 知 个 .3.16) 第 二 式 成 


立 ,第 二 式 关 似 地 证 明 ， | 
现在 米 计算 VarCB(XYD)) = 嘻 及 Var(BXYD)) ~ 咯 . 回忆 
有 na) 为 了: 的 经 验 分 布 函 数 , 有 
BOXD -BBED) = 上 BO AFP) ~ Fo)), 
易 见 
lim BCw) [Fa ko) —F(s)] -0. (6.3.18) 


例如 ， 下 2->co 的 情况 ， 注 意 到 当 w 充 分 大 时 本 (w) 一 1 以 及 
(6.3.17), 有 
lim | Bw) [Fi(®) —F (0)] | 


<lim KIH(C) CG— HT YL F (0) 

. <lim KEK[H((Y HH) He)] 0. 
于 是 由 分 部 积分 得 

BED -BBED)) 一 一 | [Fi(®) — Fw)]dB(s) 
=—| tm) ~ P(e)ITLH (01a (eo), 

因此 

oB— BIB(XS) -BE(B(FD)] 

= 至 || Fo —F (0)] CW —F (WIT'EH (0)] 


“TH WY)aG dey). (6.8.19) 


现在 我 们 要 把 上 式 右 边 的 期 望 导 放 到 积分 号 里 面 去 . 根据 Fubimi 
定理 , 这 内 外 验证 


1= Jati cme) -PoO]IPGD -GOD 


TH IITA AG RAG) < (6.3.20) 
为 此 注意 
BE{l [Fi (2) ~ FIL) — FO),)} 
SBM) PE) BEP DD FDNY) 
= [FE) (FY PY) (FY) IY 
ERIN HOEYVHO GH NI, 
以 此 代入 (6.3.20), 并 使 用 条 件 (@) 及 (6.8.14), 得 


Ea 


了 二 x|| CH (IH OD HD) HH NY (wd H (Cy) 


r 


-EE|| Go) Hq] <oo. 
这 证 明了 《8.3.20)， 于 页 


oa 


BT 一 CDOT 于 


TTT GN IaG (ey dg, (8.3.21) 
注意 到 EB[(2)] 二 Fl), BLE GA ~ Fy, Bi 
Fiw), B sy 
PY), YS sy 
以 及 全 的 连续 性 (因而 在 查 线 ss=# 上 之 积分 为 0), 由 (6.8.21) 咏 
(6.3.9)，{6.3.11), 经 过 容易 的 变化 ,得 


EEF Cw) (一 | 


o3=2|[F(e, ya te)dG (), (6.3.22) 
完全 同 释 的 推理 过 程 得 出 
or.=2| (Sts, WaF (sa (y). (6.3.23) 


下 


和 三 器 丫 m 


在 作 了 这 些 准 备 后 , 易 证 下 面 的 可 理 . 
引 理 6.8.1， 在 定理 6.8,1 的 条 件 下 , 有 


VR (Biwit Bo /or E> NOO, 1), B N00, (6.3.24) 
证 。 由 Bax 的 定义 ,用 分 部 积分 , 有 


Bur .LE 人 — HCw)ldB"(e) 
-=—| BW dH) — He)) 


一 一 和 | Br(o)d(Fn(e) — P(e)) 
一 人 -各 PB"() AG 一 9 人) (6.3.25) 
在 得 出 这 公式 的 过 程 中 , 用 到 了 
lim 要 (o [By 从 一 百 失 ] =0， 
其 证 明 方法 与 (6.3.18) 完全 一 样 ， 又 
NB (0) 4 (1— A) Ce) 


-| TUE = [HC] 一” [Htgo)]: (6.3.26) 


再 注意 faa) -zeD)=o 
因而 人 7EEGo]eCenGn -Fe)) ~0, 
由 (6.3.26) 得 


Bis= 人 [7EH(o] 一 7[ 机 (oo0]]a(n(o) — P(e)) 
= (~) | Bw)d (Pao) — FA) 


thy] Br OA Fre) — Fo). 
此 式 与 (6.3.25) 绪 合 ,得 
Bvt Baw~ 人 BW) dPnle) 一 Po) 


-| Blvd ta) -Ge))} 


* S91 » 


.再 广 意 到 
人 sum- 二 久 B(XD, [Bar Ce) = ELB(XN] 
等 等 , 得 到 
Bvt Bw= (1 -hy) 1 二 名 [BRO -BCBCXO))] 


- 译 训 [BD -B07D)]} 
41=1 


-Ga -二 革 . 


根据 古典 中 心 极限 定理 , 1s 一 > N (0, o), 1 < WW (0, 08)， 
而 To 五 独立 , 故 由 只 一 jr 得 


1 : 1 a 七 I 1 了 
VC 下 一 X(o Tt TA co 
从 而 VN (By t+ Baw) /ow > N(O, ad). 
1 1 
其 中 OB+ 
引 理 证 毕 . 
这 样 ,根据 (6.3.18), 只 需 证 时 


MVNOw—»0, MN Ow~o (N13), tm1, ,4 
(6.3.27) 


1 
1 —Ay 


则 定理 6.3.1 将 得 证 , 以 下 几 段 就 是 这 个 内 容 . 


《四 ) Oy 


我 们 将 veo 的 条 件 加 强 为 

to) v 了 (在 (0, 力 连续 , 且 宕 在 有 限 个 点 i Wr, 0 < 
92 夺 … 虽 达 1 ， 使 在 每 个 区 间 (0， oa], [es, Ga), + Los, 1) 内 ， 
v (存在 (在 闭 端 点 处 理解 为 单 过 的 ) 日 诺 足 条 件 {7% 8) | 起 
五 区 过 一 的 ] V2 D0<weil, t=0, 1, 2. 

这 个 条 件 和 Cherno 企 -Savage 原来 的 条 件 大 体 一 臻 但 较 弱 . 


= BBD * 


关于 在 条 性 ‘0) 下 的 证 明和 参看 上 上 面 亡 引 Covindarajulu 等 1967 年 
的 工作 .现在 来 处理 Ciy。 易 见 


louj < 广 二 袜 1TH (ZN]| 


< HCED] 


< [CEDGPCXDO] -ar 一 训 W, 
此 处 邢 ;= [ 刺 ( 避 圭一 互 ( 互 0 )] -sato， 不 失 普 遍 性 设 0<8< 可 . 


由 于 可- 了 ( 立 6)<1 知 如 (W379)<oo， 现 在 任 给 。>0, 有 


PVB IOw a) = PllO| PeN-u 
ENYe gy-0(I Ow| 0-), 
由 于 sy<! 且 邢 1，…, Wm 为 iid., 有 
EOin| Ye <KN-“e-»E((S 小 ”人 
t=l1 


RN Mma WY NY EEN- 
于 是 PCVBIOWw| 8) Ee YOOND y0, 当 站 ->oo， 土 面 
在 证 朋 中 用 了 不 等 式 ， 若 放 :， yg Wh 独立 ， 有 0<r<l, 则 


EOWite + Wl) ED HUW ), nN [jp. 155, 


《五 Con 


先 证 明 下 面 两 个 引 理 . 
引 理 6.8.2. 在 前 面 的 记号 干 , 取 w<w 有 ?3 


五 [Ce 人 -GD) (GW) — (WD) = G0) [1 0 (9)], 
{6.3.,28) 
Bla(Fnlo) -了 了 四)C(Pn (ly) — PO) -ap (wary), 
(6.3.29) 
力 注意 全 .3.28) 当 gr 时 世 成 立 ， 
és 后 


BfICCPa(o) — Po)) YT ao). 《6.3.30) 


证 。 注意 到 盏 [Gs(o)] = G(o) 对 任何 有 
(6 .3.29) 左 边 = BB[Gw(w) Gs (W)] (0)G(y) (6.3.31) 
以 Gate) 记 一 个 样本 了 的 经 验 分 布 函数 , 则 将 有 
BIG, (G1 ~ EIGuo) Gy 1， 
但 怒 见 (注意 “< 
BIG Gy] = G0), Bi 
-G4 (0) G0), Bixh 
束 BE[GQ,(W 6,(D)] -TG + Go) Gy). 


代入 (6.3.81) 得 (6.3.28). 
为 证 (6.83.29), 注意 [dFm(2)] = BB[F, (+dr) — Fn(g)]= 
Piw+dw) -Flw) =QF(w), 有 
(8.3.29) 的 左边 = BaF 0)aF,(y)] —adF (Car), 
《6.3.32) 


而 Brads)] = S$ rap dF 


ea 和 页 
此 处 如 4(w) 为 一 个 样本 五 : 的 经 验 分 布 卫 数 ， 坦 显然 
BaFuw ary() =0, imj =dF (ary), Git, 


因而 BIlaP,(WaFa(D)] -SL dF (odF(y). 


代入 (6.3.32) 即 得 (6.8.39) 、(6.8.30) 的 证 明 类 似 . 
引 理 6.8.8， 设 配 , …, 了 为 一 维 连 续 分 布 函数 , 厅 = 


局 PPe 此 处 己 N= 工 且 0<%<NS1-M<1 i=1, …, o， 设 


不 4，…，Xin 为 按 自 中 的 iid. 样本 ,4 一 1，…， 0。 育 一 识 吉 
又 记 Sm 一 {2: 吾 (w) 昌 一 吾 (o)]>mo/N}、 则 对 任 给 s>0， 
存在 >0, 使 当 充分 大 时 ,有 
POXyESys, j=1, 1 WW, tl, OP1—e, (6.8.83) 
证 ， 以 如 刀 记 Sys 的 下 确 界 与 上 确 界 , 易 见 有 
HG -HG — VITA7D. 


但 Me LE (ta) — Ftti)] 宇 匡 ($s) -HH {1) {1 —MD, 放 有 
ilia) — Pilt) >1- 二 [1— (HU H(t))] 


Mo 
当 好 充分 大, 因而 当 轨 co 时， 


(6.3.33) 左 边 一 于 [it 一 P(E I™ 
wy 
> 二] ea 
取 9>0 充 分 小 致 ea>> 工 一 5 则 由 上 式 知 , 当 交 充分 大 时 个 .3.33) 
成 立 . 引 理 证 毕 ， 
现 将 Caw 表 为 Car 一 NOgx 十 代 一 2 Car， 其 中 


Cw) Fnl@) — PO TTH IAPnle) — FO)), 


Cg 下 GO GT EH A Pnl®) ~ P(e)). 
将 CSw 表 为 


Oo 于 | 全 [LH (oa, (8) — Fw)) 


过 人 六 LH (a) ldap to) (6.3.84) 
jE 明 如 下 ; 记 界 = {X, sy X,}, 加 
| TH)idL (Pn 人 -下 四 河 


| TL aL le) — P(e)) 


+ 之 ECX [(E£ -rexe) -人 了 一 荆 -PCxoj] 


3 
=2| /LA (2)] Ene) — F(a Pn(e) — F(z)) 
tL rp | 器 a i 1 
+ 名 帮 CICXGa (六 FUN) -|. 
青 注意 到 


人 


ETH OIAPa le) =- TH EY)] 
以 及 FF 人 一 POCO]eLFa(o -正人 


1 » Ee Xs TH Xa), 


DE j=l 
如 得 (6.3.84). 
提名 之 <0 到 二 (0 一 如 让 由 于 分 布 五 好 过 
续 , 不 失 普 遍 性 可 设 0 天 下 /对 4 一 4， …, 名 3 一 1，*…'， 有 


人 了 7 民 CD]arCsG 一 Bo) 


-STA (Ia) ~ FO)). 
此 处 oo 一 co osa= ce、 在 每 个 区 间 内 用 分 部 积分 ,得 
| 本]e[CFa(a) -P(e))) 


| {I [HEor0) I LFalen) — For)]’ 
—JIH LR, (0 ~ FO] 
-| [Pne) — (II" LH Co)]aH Cw). (6.3.36) 
此 式 与 (6.8.84) 结合 , 可 将 02x 表 为 
200r = Dan + Day + Doxwt Duy. (6,3.36) 
其 中 
Dw= 一 | [PsO 一 PCDO127"[ 再 的 36 再 (o)， 


Dun= -| [Fe (go) — FOO J LH (oAH Cw), 


Daw 一下 襄 J[H (XD]， Dw~ (6.8.3B) 右 边 第 一 项 ， 


Sm 的 意义 如 引 理 6.3.8, 且 ?>0 选择 之 ,至 
有 六 人 Br b=1l, 1 了 Do f=1, ,D1 8. 
(6.3.37) 
这 秒 选 择 的 可 能 性 己 在 吉 理 4,3.8 中 证 明了 。 现在 分 别 考虑 每 个 


" 596» 


Dev， $=1, 2, 3, 4. 有 
BIDxll<|, EEFa(®) ~ P(e)]?|7" (CH (0)) IdaH (%) 


网 Fw) [1—F(w)] [7* [LH (2)] AH (0), 


注意 到 Swo fo: 徊 所 吾 ( 史 <1 一 六 | 对 某 个 5>0, 利 用 条 件 (1) 
及 (6.3.14) 得 
EtlDiwl: < (10) [oC1—o)] de. 
3b/N 
但 人 EG- 0D)] -2rde O(N )， 有 
EIDy|] KN 

从 而 VDiy 一 > 0, 妆 No0, 
注意 到 88s 一 各:0< 百 (9) < 总 |+ 人 o:1 一 名 <H(D <1 一 了 十 了 3 
对 某 个 5>0, co> 册 市 当 (B68.3.87DD) 中 的 事件 发 生 时 ， Fm (w) 一 0 当 
wmEL, Fn(t) 一 二 当 teE Dy, 前 以 不 小 于 i—& 的 概率 成立 着 

Dsx = | aoyye[ 区 (区 14 瑟 (四 


十 | [1 FTI LH Co) aH Cw) 
< HHOA- AH)] -aH 


+K| Q— HLH UH)] aH 
=0N -7). 
因为 8#>0 而 se>0 可 任意 小 ,证 明了 VHDay 一 > 0， Dox 的 处 理 
与 Ow 同 ， 至 于 Duw, 只 需 注意 


BL(Pako) — P(e) LF] <EKN. 


即 可 知 太 [| Dw] =0CN-D), 于 是 VDsw 一 > 0， 综 合 以 上 ,证 
明了 YN Ow 一 > 0, 当 NW->o0. 


- BHT = 


现在 考虑 08r， 仍 将 其 才 为 Dis 二 Daw 它们 分 别 是 0&y 表达 
式 中 被 积 函 数 在 Sm 和 司 。 积 分 值 ， 用 处 理 O04x 中 的 Das 的 方法 
处 理 此 处 的 Dzs, 得 知 以 不 小 于 1- s 的 概率 成 立 着 
Ipssl <K| HG -Ha 
+ zj I -sated 矶 
~O(N-1270). 
故 仍 有 MDsy 一 > 0， 当 入 ->oo, 现 引进 记号 : 
外 一 (的 :< 外 SES Y ES 
(a 一 全 (2 wy; 由 后 和 sn YEN, 
i = Dy, 
注意 到 姜 1,…， 下 与 了 … 了 独立 以 及 (6.3.28) 和 (6.3.10)， 
和 
ELDix|X1, ny 如 吕 ] 
-| | BCCG, -GO) (Gy) -GD)]， 
TH DITEH IAP, ee) — FA Fy) — Py)) 


-| 上 = Gy, WAP ~ PD dP — FY 
人 
+ 咱 二 Bo oadlFalt) — Fo) ACF) — Fy)) 
WL 


+| 二 Gl, 四 (GPa — FN). 


易 见 上 式 右 端 第 一 、-- 项 相等 .两 边 再 取 均 俏 ， 用 (6.3.29)， 
66.3.30) ,得 
五 (1 . 
=- 一 -过 -Se War (ap ty +1 人 Be aa 


mn Wiad 
人 


<KEN {| 297 7 lardy 


re 1 


* 598* 


EN- sf [oD ?da EN 


因而 六 再 (D 和 ->0， 当 ->co, 即 MWDiw 一 > 0, 当 ->oo, 这 
祥 , 证 明了 MWO%s -二 > 0, 结合 前 面 已 证 的 MOiw -二 > 0, 得 到 
MNO -二 > 0 3 N->o0., 


《六 ) Csw 


定理 6.3.1 的 证 明 , 
引 理 6.3.&. 当真 一 co 时 ， 


Hw) }- 
P| op, Hay lg NT0, (6.3.38) 


| 1— HC) oie } 
P| snp 二 六 全 于 321log 六 一 >0. ‘8.8.39) 


证 ， 陷 一 00 一 gg 二 00， 至 间 (Gy 一 2 
3 ml. 记 六 一 Cm wi;]， 于 一 十， 本 PE, S= [Iog N]. 将 
', Tn a 些 群 {， 1s}, {lar1. ny 了 ss， 2 显然 


[1 pb, Fy 全 误 罗 -<alog | 一 {在 每 群 内 都 至 少 有 一 个 样本 互让 ， 
但 是 
2 
P( 在 指定 的 一 群 内 无 样本 点 ) = (1 京 ) <e-s= 二 Et 
而 群 的 数目 不 超过 AS， 敬 当 六 3， 
P( 每 群 内 都 至 少 有 一 个 样本 点 ) 沁 1 一 二 一 全 之 1 一 各 一 1 
内 此 


多 一 了 


lim P| gup Fw) <2log xy- 


Nam 《es 的 >0 Lm Co) 
类 似 的 关系 在 将 下 改 为 GG Fm 改 为 如 时 也 对 ,市 
站 < INAX | sup Fo) au 全 全 


Sup 
四 :Cn Hylw) ma( 鸭 >0 下 仙人 各] ”39n(e 0 全 过) 用 


从 而 推出 (6.8.88)，(6.3.89) 的 证 明 完 全 相似 ， 


"S99. 


引 理 6.3.5. 
ELlCHy(®)— H(w)) dFmn(s)] 
-| 世人 (1—F{r)) dF (8) — Fi) (I—2F{2)) dF (wo) XN 
a ms 


EA 4 -02) dF |( ~ (6.3.40) 


证 . 此 引 理 证 明 昨 初等 的 ， 琅 y= 十 dw, 
[Rs — Hm] [Fa (gy) ~ Fnl®)] 
一 戏 [Fa(o) — F (0) LP, (Y) ~ Fk)] 
Tan 1— ha) [Fm (0) — PE) [Gate 一 全 (的 ] [Fn ty) 
一 下 (的 ] 十 (~ Nh) EG 0) ~— G0] En) — Fn lr)]. 
(6.83.41) 
为 确定 计 取 aze 闻 0 这 时 % 世 yy 上 起 两 边 求 均值 , 右边 第 二 项 之 均 
值 为 0, 第 三 项 之 均值 为 
(1—Aw) Gn [i — G8) LR) — Pe)) mn. 
至 于 第 一 项 之 均值 , 涉及 
加 [Fr 五 w( 的 1] EBL, Fn], (eoD) 
的 计算 .以 前 者 为 例 ， 以 itz) 记 一 个 样本 三 : 的 经 验 分 布 函 
数 , 则 


BEEF Foal)] = S$ BE) Fe) Ba)]， 


ME Rl 


但 
(W)C), 若 到 大 天 本 两 不 同 ， 


玫 ( 人 0) 暂且 ， 若 和 一 交 中 坊 

Fw), 攻 %j= 

Fy), 车 6 了 一 名 

代入 上 式 整 理 之 即 得 百 [F%C20) Fm (9 ( 当 w=y 时 得 [R33,(w5)]). 

类 似 地 计算 吾 [Fn(lw) Fm(9)]， 由 此 可 算出 (6.8. 抽 ) 右边 第 一 项 

的 均值 。 将 点 上 所 得 全 部 结果 整理 之 即 得 (6.3.40)， 
现在 来 考虑 Car. 以 如 <…<Zrz 记 合 样本 三 …， 开 。 

了 的 次 序 样本 , 并 记 


+ GOD 


BLEFut®) Fy (wm) Far (yf)] 一 


du (gy ) HE Wk TH ) [ECZ0]， 


N++1 
cl 
则 由 Cax 的 表达 式 , 立 得 
lw| < 区 襄 I'dn|. (6.3.42) 


3' 表示 只 对 2 属于 { 宇 tb …， 瑟 oj 的 那些 纪 求 和 , 记 ww 一 [Yo， 
此 处 0<8 一 3713<<8/4< 下 ， 则 
jiOsx| EE (CDint Dyn + Day), 


此 处 
NN SY 
D -1 ，Dw- 订 | 全 +1 dey EL 
Dr—ll < 
ww 攻 一 四 ,人 dv ” 
Daw 中 2B' 的 意义 与 (6.3,43) 同 ， 
先 讨 论 Diw， 有 有 
1 此 
On /二 条) + 开罗 17 (EC 
D3 | | 六 (可 (GD = As + As+ hs, 
但 由 条 人 性 (0 , 
6 站 dV] _ 
MG) < 人 (1- WTI )jj EN™, 
有 < 区 六 wyNi EN-1t+§ 0 (0), 


又 因 , 当 (6.3.87) 中 的 事件 发 生 时 , 每 个 瓦 (20 > 六 (对 某 个 5>> 
,因而 

cienth 
放 以 天 率 不 小 于 1 一 sa， 上述 对 4 之 信 计 对 如 也 对 ， 所 以 
VEA— > 0, Nyo0, $1, 于 


<ENE~ 


[和 


a 


现在 考 感 4s， 当 司 .3.87) 中 的 事件 发 生 时 , 有 
EO EN SIZ 
EN-M NIN ON oN (6.8.48) 
选 定 @ 致 五 (0) 2/8, 则 以 恕 记 下 …, 了 之 样本 中 位 数 ,有 
P(Ei<0)> 总 的 3 全- ¥ mo. 
#= 


因此 当 六 充分 大 时 ， 有 也 ss 四 一 s。 又 因 当 站 训 分 大 时 
MA0NA3, 放 当 NN 充分 大 时 ， ZIS Er ,于 是 得 到 
PZ 一 1 1 一 8 当 充分 大 ，, 
(6.3.44) 


当 (6.3.37) 及 (6.3.44) 中 的 事件 网 时 发 生 时 (概率 之 1 一 22), 有 
BEHED MPLI + HM OZ) SMF a) +tT 一 ia 


=-) 寻 +1 一 7 一 1 一 )o/8， 这 一 荆 ， LN, 
所 以 有 
刘 几 IHCZONITIH (ZDNET NEN oN-), 
d=14 


出 于 s> 必 任意 小 , 知 VF As—>0, 当 娘 一 co。 合 以 上 证 明了 


MWHDiw 一 > 0， 当 W->co， 完 全 类 伏地 处 理 Dox 的 情况 . 

现在 考虑 Poavr， 给 定 >0 充 分 小 , 找 四 六 致 *= 互 (@) 一 1 一 
五 (0)， 定 义 三 个 集 如 下 ， 

Qi {ooh Qs’ {Zo wa}; sw 
则 Daw 所 起 十 4s 十 4s， 其 中 


4.-|.|7 [rere 一 7[ 互 (四 ] 


- (Wir ~H)) TH) dar (), 


而 4。，4s 为 同一 被 积 鲨 数 在 和 ,出 上 的 积分 , 


* DOB» 


注意 到 
sup | 五 yf 约 一 吾 (o | <sup | Fn(w) — Fim) | 
十 Sup [|G (2) — Gs) |， 
利用 Komxoropon 定理 (定理 3.5.5), 对 任 给 se> 0 存在 充分 大 的 
多， 使 当 站 充分 天 时 ， 
P(sup |Hy() ~ H Ce) <)>1-. (6.8.45) 


国 此 ,可 选 服 更 大 的 信使 当 育 充分 大 时 ， 
P(sup| 二 Hy{w) — BH{%) | <F/v 万)>1-e 
{6.3.46} 
现在 加 到 条 件 (6) 中 的 点 eu …，as， 选 定 9>0 充分 小 ， 臻 
ET El 人 作 区 间 荆 == 
[i, Gj, 青豆 (GD 一 四 一 和 再 人) 一 时 十 玉环 这些 区 
间 显 然 两 两 无 公共 点 , 旦 每 个 Dic [w 妇 ， 且 显然 当 4ET 一 局 
N> (V/g)* 而 《6.8.46) 中 的 事件 发 生 时 ， 以 -向 二- Hw(%) 和 
吾 (z) 为 端点 的 区 间 不 包含 {@1 …。oj 中 任何 点 .再 注意 到 
172 (oo) | (可 能 是 单 边 的 ) 在 a<w 忆 5 有 界 , 知 4 表达 式 中 的 被 积 
函数 工 (4) 不 超过 (注意 下 与 4 无关, 下 同 )， 


Lo <E [He) HW)] <E 了 -下 
| DCFo Ce) 二 大方 ， (6.3.47) 


此 式 当 妨 充 分 大 时 以 不 小 于 1~s 的 概率 成 立 ， 又 
zero < LZ, 


注意 到 工 (w) 的 形状 ， 对 y (om) 的 假定 及 | Go | 在 [4, 四 有 界 ， 
易 见 在 6.3 .46) 中 的 事件 发 生 时 , 有 了 (GD 所 VN 出 是 推 


3 。 


出 以 不 小 于 1- 。 的 概率 ,有 
| 了 (oD)GPu(e) <KN-W%(I 中 包含 和 的 个 数 )， 
但 由 大 数 定律 , 当 入 >oc 时 , 有 
坦 C 中 包含 到 的 个 数 ) 一 > 21g. 
因而 当 六 充分 大 时 , 以 不 小 于 1 一 2s 的 概率 成 立 ， 
| Le dR) < 20K N-1?, (6.3.48) 


由于 ?可 以 任意 小 而 下 与 8g 无关, 结合 (6.3.47) 和 (6.8.48) 得 
出 : 对 任 给 e>>0 59>>0 当 入 充分 大 时 ， 


[ ,LadPn le) nN 
的 概率 不 小 于 1 一 2s， 这 证 明了 M41 一 > 0, 当 和 yo0 
现在 考虑 ds， 根 据 前 而 所 说 ， 当 下 和 时 由 于 Qs 与 无 
公共 点 , 当 (6.3.46) 中 的 事 作 发 生 时 , 以 -二 豆 r( 鸭 和 厂 ( 四 为 
端点 的 区 间 不 包含 fcz，.…， 思 } 中 的 点 , 故 当 育 充分 大 时 ,以 不 小 
于 1 一 & 的 概率 ,有 
hero 


|" (6, A Hx(e) + (1— -600)H (0)); dF (ew), 
， 16.3 .49) 
根据 可 理 6.3.4, 对 充分 大 的 站 以 不 小 于 1 一 8 的 概率 成 立 着 
. 百 ( 咏 1— Hrs) _., 
0<Hyw) <13 Fwy =<]opg N, 3H SS2I0gA， 
当 叱 式 成 立时 ,有 (注意 0<<#. 志 1 
x 
代 一 站 五 人) 二 四 万 二 HiriFwo) 、 1 
Hiw)} > 910gN) ” 


* Od 


1- [4 -0 H+ - 态 7 HT Ho)| 
1—H iw) 


-TB 人 


-4 1 FH) 


_ I-Hy(m) Ef 
>1-0+0 HO > Gr Ny 


记 志 ,以 不 小 于 1 一 8 的 概率 成 并 着 
.8 豆 vGo) + (1~0)H(%) | 


N 
”Ni 
«Eg NM [EH (ll— Hm “a, (6 .3.50) 
由 (6.3.87)，(6.3.49) 和 (68.8.50), 知己 不 小 于 1 一 88 的 概率 成 
立 著 


4s<| Kllog N)' Hye) Ho) 


si 六 二 1 
[Hm TH)) dF (sy), 
再 以 
[He) Ho] <2[Hs(0) — Hlm)]:+ i H? Ce) 
代入 上 式 , 得 


A<K og N)| RPE 0 H (0)] -sap,, Cy) 
+E (los W|IHs CD) — HO). 
[HC (一 再 (@))]-s2tsdFo(o) = 的 + 慨 
此 以 概率 >1 一 3e 成 立 而 。 可 任意 小 , 故 欲 证 VW 4s 一 -> 0， 只 
需 证 VR 如 一 >0, VF 四 -一 >0. 但 
EASEK (og WY: | HEH (0) (1— HC) "dF () 


<E Vogt | FIHG— HI"aH, 
Nr “len 


ee 


回忆 By, 有 <H 所 二 一 的 形状 , 得 
5 
HOA) SKEDL NI KN -2220og N)®, 


这 证 明了 MR 一 > 0， 因 用 引 理 6.3.5 得 


| 一 站 
E(AD<EE | [HOH 
2 iN 


b 
1—é/N 


+E Lg [HG HY] 
| N? B/N 
«EN 0g MN). 


从 而 证 明了 V 卫 必 - 卫 > 0， 因 此 ， 证 明了 M4s 一 > 0， 关 于 
4s 的 处 理 与 ds 完全 相似 ， 这 样 ， 由 Dar 和 4 十 4 十 4s， 证 明了 
YTDzw 一 > 0， 最 后 , 由 
[Osx | EE CDin 十 Daw + Day) 
得 MROsw -二 > 0, 当 N00. 
现存 不 难 完成 定理 6.8.1 的 证 明 (在 和 条件 ta)，(b，G0 之 

下 )， 因 

VN Oh VN (Bt Bw) /ont VIOn-L+h, 


由 引 理 6.3.1 知 五 一 > 广 (0, 1)， 又 鸯 oy 与 下 无 关 , 由 (四 ) 一 
六 ) 及 假定 人吉 知 -一 > 0， 这 证 明了 (6.8.5). 


(七 ) 收 证 的 一 致 性 


在 前 面 所 给 的 定理 6.3.1 的 证 明 中 ;Ys 不 随访 变化 "这 个 
条 件 是 重要 的 .这 主要 表现 在 引 理 6.3.1 的 证 明 中 .因为 车 和 x 
随 六 变化 , 则 BCw) 和 Br(w) ( 见 (6.3.15)) 将 与 有关 , 而 古典 
中 心 极限 定理 不 适用 .但 是 Xx 与 六 无 关 这 个 慨 定 是 不 方便 的 ， 
不 仅 如 此 , 在 有 些 癌 题 中 , 吾 和 全 也 可 以 与 到 有 闫 .这 人 一段 的 目 
的 就 十 在 Xw， 了 ,了 刀 可 以 与 要 有 关 的 这 种 较 复杂 的 情况 下 ， 米 考 
察 定理 6.3.1 葛 结 论 是 否 仍 成 立 ， 

1 8。 


为 了 证 明 主 要 的 结果 , 需要 儿 件 预备 事实 . 
引 理 6.3.6. (Berry-Esseen 定理 )， 设 0<8&1, 存在 着 只 
与 有关 的 有 限 常 数 QC)， 使 车 广 1，…*， 之 ,为 任何 i 记 . 变量 ， 
EX oa, Var(Ti)—o, | 
Basra= EB(R—a|*) ec. 


以 (2) 记 了 ,= 以 (区 ,一 信人 /we 的 分 布 函数 , 则 对 一 切 am 有 


sup [到 fy 一 {sy) | <p G)| -号 从 Bars ne 二 (人 党 As 2) mv], 
(6.3.51) 
这 是 极限 理论 中 的 著名 定理 .证 肝 可 参看 [4]， 

由 此 定理 可 知 ， 若 下 1 的 分 布 耳 属于 这 样 一 个 集合 多 存在 
之 0 及 于 <<oo, 致 对 任何 卫 EE 多 ,分 布 卫 的 方差 总 不 小 于 史 而 
其 2+8 阶 绝对 原点 拭 | 1z|298B (Go) 总 <M, 则 

lm[sup sup | 7。() ~ (0) 上 ~0. (6.8.652) 
也 就 是 说 ， 对 多 中 的 分 布 了 了 上述 了 ,的 分 布 一 至 地 收 训 于 
六 (0, 1) 的 分 布 酒 数 当 (w%w)。 为 证 明 这 一 点 ， 只 需 指出 存在 下 "一 
co， 致 Bato《) 所 M'， 此 可 以 如 下 证 明 ; 记 a(P) 一 | wae)， 
则 aC lm | isl?rgF(w)<M. 但 
|s—ath) [2 2 {| ] 2 十 [gf | 2 
因而 对 任何 了 EF 

Bins) = | ealm) ar <2 Iola Ce) 

21+8| oF | + 246 一 一 上 时- 
于 是 由 《6.3.54) 立即 得 到 (6.3.52). 

引 理 8.8.7. 设 对 任何 名 一 工 ， 2, ry 变量 下 与 Y, 独立 ， 三 ， 
利 了 ,的 分 布 分 别 为 了 stay 和 (wy)， 它 依赖 于 基 些 参数 (相当 
于 上 文 的 Xw 五 ， GQ 等 ) . 设 台 为 8 的 一 个 集合 ， 当 neo 时 ,对 全 
内 的 记 Fate) 和 Ga 都 一 致 地 政和 化 于 更 (的 设 aw 5 为 实 

[ NOT 二 


数 ，ar 十 及 一 二 贡 一 二 3 … 和 以 五 se) 记 革 ,5 了 ,之 分 布 请 
数 , 则 当 mn->co 时 ,对 日 内 的 9 及 一 切 满 是 上 述 条 件 的 {ow， bj 一 
致 地 有 莫 ,(2) 一 嘲 (w)， 

证 . 由 假定 知 不 失 普 遍 性 可 和 设 多 0, 如 *0, 又 ,通过 改 下 
二 为 一 到 一 了 不 失 普通 性 可 设 mm> 册 和 >0， 这 时 由 独立 性 


Hm) = [Fl( 全 二 ) 
-和 -4( 所 二 )]ae,( 竺 ) 
Ti i ， 后- 记 )] 

+ 厂 -5 二 az( 记 ) 


由 正 态 分 布 的 性 质 立即 得 到 4 一 瑟 42)， 又 由 假定 知 lim 五 =0， 对 


0E8 和 fm。 8 一 致 地 成 立 ， 对 二 先 实行 分 部 积分 , 即 可 看 出 
li 五 ~0 对 于 0E6 和 fas,b} 也 一 至 成 立 ， 引 更 证 毕 . 

现在 不 难 证 明 下 面 的 一 般 性 结果 . 

定理 6.8.2. 假定 定理 6.3.1 的 条 件 (a)，(o) 成 立 , 且 

人 存在 0< jos 豆 致 as 和 ost~jo 对 一 切 玉 

2。 (ww 如 @ 属于 这 样 一 个 集合 @, 对 日 中 任 一 组 (hs, 也， 
G)，B3(ZD 和 B*(Ys) (它们 的 意义 见 (6.3.15), 面 区 也: 分别 
有 分 布 6) 的 方差 总 不 小 于 某 个 图 定 党 数 a>0. 

8。 定理 6.3.1 中 的 条 件 (b) 对 日 中 的 Cu 了 ,9) 一 至 地 成 
立 ， 这 等 于 说 ;对 任 给 e>0， 


mP (VW yr] -7 [rj] 
"R(T) | >e) = 人, 


对 x, 也 , GH) 9 一致 成 立 ， 
0 


则 对 于 如 中 的 (hx, 了 如) ， 当 和 一 co 时 (Ty— Kw} /oy 的 分 
布 函数 一 致 地 收 傅 于 免 (四 

证 D。 首先 , 他 细 检 查 (四 ) 一 (六 ) 各 段 中 的 论证 发 现 , 所 证 明 
的 MOw 一 > 0， 当 六 >co， 对 满足 本 定理 条 件 1* 的 那些 和 hx 
及 一 吉 连续 分 布 FG 都 是 一 致 的 ， 结合 本 定理 条 件 3*， 即 知 
/再 Co 一 >0, 4- 2, 3, 4 - 致 地 于 6@， 因此 ， 只 需 证 表 对 @ 
中 的 Aw, 了，G)，MTW (Biw+ Boyw) /ox 的 分 布 一 致 地 收 黎 于 
dm， 但 

ME (By + Bon) /N= rt ni byPy, 


其 中 
gu— LM ~ Var(B (x)) ,ba= MTA ~ Var (BF 
5 a 


1 BD) -EBD))] 
Im Va 
1 DD)] 
” Vn VV TD 
对 任何 W，Uw。 Vs 独立 , 且 由 本 定理 假定 知 ”, 对 8 中 的 (kw 丙 
9)， 当 >co 时 ，U 和 Vs 的 分 布 都 一 致 地 收敛 于 更 (o]， 又 
翅 十 瑟 = 工 (回忆 oo 的 定义 )， 于 是 由 引 理 6.3.7 直接 得 到 所 窝 证 
的 结果 . 
我 们 来 分 析 一 下 本 定理 的 条 件 。 条 件 1° 不 成 间 题 , 因为 一 般 


总 假定 下 -NE (0, 1), 这 时 条 件 1° 自然 满足 , 对 条 件 3°, 注意 到 
I 加 多 | 
1oszj ss 元 疡 Ty (WT) (nr) = Ry, 


Rx 与 下， G, hy 完全 无 关 , 而 在 许多 情况 下 我 们 可 证 其 
imvVNR =0 


DD 仍 以 条 件 (e) 代 (0o) 米 证明. 
加 注意 (6.8.16) 式 , 其 中 的 奸 与 Ny, 了 FG 无 关 。 


"HOD = 


例如， 在 Jwx~J 及 后 文 的 定理 6.3. 雄 ， 这 时 条 件 3° 自然 成 
他 

因此 , 关键 就 在 于 条 件 总 ， 即 Var(DktonD) 和 VartB*(FD》 
有 菲 8 下界 .关于 这 个 问题 我 们 给 出 以 下 的 结 时 . 

定理 4.8.8， 设 连续 分 布 认 数 互 . 好 男 定 , 假定 存在 区 乌 (%， 
引 , 使 五 , 他 在 其 上 皆 为 严 增 , 而 VCw) 在 (0, 1) 内 至 多 只 在 可 列 
个 点 为 0 V (vw) 澡 足 定理 6.3.1I 的 条 件 (0)， 且 0<w 所 hwy 丰 1 一 
Ml, 则 Var(B(o)) 和 Var(B*( 王 )) 者 有 韭 9 下 界 . 

证 。 根据 条 件 (6e) ,Jw) 在 (0, 芒 除 有 限 个 点 外 是 连续 的 ， 
又 由 此 处 的 假定 ，v 你) 许多 只 在 可 列 个 点 汐 0， 于 是 根据 召 \) 
的 定义 及 如 (0) 在 to 四 的 严 增 性 可 知 Btw) 在 (wm, 5B) 上 不 恒 
等 于 常数 , 记 | 


sa-| Bar @/ are), 
注意 由 假定 知 48>0， 从 
Var (Bo)) = 人 [Bo ~ E(B(O))YAF Ce) 
> 人 [人 -E(B(w))1aF (0) 
>| [B(g) —a]sdF Cg) 


=f BwWarw-(f BOWar@Y [ap 人， 


由 Sebwars 不 等 式 可 知 , 上 式 汪 >0, 除非 在 (x, 及 中 , 除 一 个 下 -学 
测 售 外， 如 (zw) 为 常数 , 但 这 不 可 能 ， 因 前 已 指出 8%w) 在 (a, 六 
不 恒 等 于 常数 , 有 目 Btw) 处 处 连续 ， 这 证 明了 Var(8 (wm)) >>0. 我 
们 把 固定 wy 一 和 (注意 如 G 早已 固定 ) 时 ， 算 出 的 Yar (B89)) 记 
为 gg 已 往 证 : 9 在 0< 和 < 连续 . 

记 五; 2) 一 AFCw) 土 忆 一 办 G (vw)， 任 给 充分 小 8 这 0. 提 wns， 
My,， mre，M 人 Mg， 全 


* P10 二 


Flms) 一 人 (me) =1~ F (ME —1~G(Me) =8, 
并 记 m=mintmz, m0)， 族 一 max (Mp， 开 6G)， 将 央 达 式 


号 0 = 中 FO) -FOYT TH, (0)). 


TH WadG ww) ae yy) 
分 解 为 g10%) = 加 已) 十 ga(%)， 其 中 


90 = 9 = 


Ds={, Wmsey< MM}, 
Ds={(r, Wi oos<y< oo} 一 了 > 

由 对 六 (2) 的 假定 , 利用 控制 收敛 定理 , 不 难 证 明 gs0X) 在 0< 和 < 
1 连续 , 事实 上 , 以 {0} = 记 罗 人) 在 (0, 1) 的 不 连续 点 集 . 任 
取 和 % 0<4<1, 及 一 串 和 >. 记 集合 外 一 fw: 万 (9) = 对 某 个 让， 
则 显然 的 G- 测 度 为 0, 但 当 w 全 @ 时 ， 

lim 了 [本 st] 一 [本 (oj， 
且 在 mz 所 用 内 有 8 生理 so 1 一 8 对 一 切 和 而 下 假定 ke)， 
在 ss 吾 v(Gz) sl 一 e 内 也 [Bo 人 o)] 是 一 致 有 界 的 , 因而 由 控制 收 
敛 定理 

lim| [FC CF IT EH, (IT LH 140 (0)dG (wy) 
Da 


= {jr FIT LH IT AH, WaG (a) dG (wy, 


从 而 证 明了 ge 的 连续 性 。 现在 证 明 : 在 0 一 MXosXS 一 Xo<] 
内 gs 以) 可 一 臻 地 任意 小 ， 只 要 s>0 权 得 任意 小 ， 事 实 上 ， 在 和 
属于 上 述 区 间 时 ， 


ROT A DAG EAEAS AONE 


“LH DN] oH (waH,(y, 
| 


* S11le 


ga Ch) SE [ho ll — XAp)] 二 J wT TD ldvdy 


[| 


- 1 Ir lay] 


1 


<FK [h(a01"| ff ww 一 机 ， 


[1 下 


[enyaddy 
- ff [eo J dy 
le (6.8 .653) 

积分 

A -ooda 田 

帮 二 要 < 站 <1 
-| fy-3/2+2 (1 ~ 12+4] if wv tde |dy 
< ty- 9 ERY ~) -dy 


<E| .世代 -六 ] -oay<oa 


因此 当 en>0 时 , (6.3.53) 右边 趋 于 0, 因而 评 明 了 以 上 上 关于 gs 0%) 
的 论断 ， 

利用 各 4 一 00) 二 gstA)， 其 中 当 8 固定 时 ，gs (NW) 连续 贡 
9a 以 ) 可 任意 小 ,由 例 行 的 推理 , 知 赤 (在 0<X<1 连续 , 因而 
J) = Var(B( 卫 )) 一 2g1%) 也 连续 。 有 既然 56 在 (0, 1) 点 点 连 
续 且 大 于 0, 它 必 在 每 个 团子 区 向 内 有 非 9 下界， 定理 证 毕 . 

在 考 虐 涉及 色 非 参数 检验 的 功效 对 比 的 问题 时 , 常 需要 在 吕 
对 可 以 随 帮 变动 的 情况 下 考察 一 区 渐 近 正 态 性 的 问题 下面 的 
定理 在 五 , G 只 有 一 个 位 里 参数 的 差别 的 情况 下 解决 了 这 个 间 
题 ， 

定理 6€.8.4.、， 设 xx 满足 定型 8.3.2 的 条 件 1°, 叉 

Flr = PrtO), G0) -Bist py), 


si 


名 为 一 狂 定 的 连续 分 布 函数 2 则 存在 4>0 使 对 一 切 满 中 上述， 
条 人 忻 工 的 hy 和 满足 | 一 $y ,所 和 的 乓 和 yw，YartB8( 有 1)) 和 
Var (B* (Y')) 都 有 非 下 红 且 当 的 一 Br>0 时 ， 


lim TS 0% ~2 jf sz -D7 dnay 


2 

-rd (I Was). (6.3.54) 

证 ， 显然) 不 失 普 渔 性 可 设 0,~0，b) 只 需 证 当 lim br- 
而 xx 在 [ho; 4 一 ho] 以 任何 方式 变化 时 ,有 

Im {| G@H GWT ITIH YAR day) 


—<Pm<y 


=—lim jf AO EA OA 


一 0 让 


Tad ar ow 
i oI DT TD dr oy 


-3 a (7 wae) | (6.3.55) 
以 及 
tm {{ FO OPWITLR INH Wag Gy) 


-| POT OITA ar ty. 
| (6.3.56) 
以 《6.3.56) 为 例 ， 通 过 变数 代 换 , 左边 的 级 限 转化 为 

im ff Veg vy- 


— 


‘Ey ExvGNar adr nn, 


1) 此 语 的 确 动 意义 是 : 1 …， Xm 和 了 …， 了 是 自 巡 (4 一 98) 笋 (wo 一) 
中 抽出 的 , 当 mw * 因而 区 变化 时 ,样本 所 来 自 的 总 体 的 分 布 也 随 之 而 变化 . 


» 本 1 


此 处 
Ey(w) T's $y) + (Lh (0)] = (no)), 
由 于 Vi'(g) 在 (0， 内 除 可 列 个 点 外 连续 , 当 N->co 时 ， 
Ey (oO Er TVETIDY)]. (6.3.57) 
对 测度 qz (a) 4 (y)a.6. 成 立 ， 现 任 给 s>0 充分 小 , 挠 加 和 到， 
致 罗 (m) =1~ 轨 (4) 一 se， 考察 积分 
= | Pe-$a -wy-$ 


-Ky Cw) Kx(W dy (wo (的 . 
由 于 在 m<w<y< 了 内 , 当 克 充分 大 时 ,上述 积 分 的 被 积 画 数 有 
界 ,出 (6.3. 乓 ), 根 据 控制 收 化 定理 ,有 
jm | FOU TE dy day w) 


may 
= | sD Ty dndy, (6.3.58) 
TU 1 
现职 m' 和 以 ' 致 轨 (m Y=1 一 外 (M 一 28, 其 及 
太一 fa oy) 一 cowry 人 ioo} 一 全 办 :mr 
Da={%, DOLELYLI}— {rt, Ws <s W128}. 
利用 显然 的 不 等 式 
fj-g) -yy KyCy) lav way 的 


了 


< holt a0)1-?| Ss Cw) [LS C1. 


SS 的， (6.3.69) 
国 为 当 站 充分 大 而 Go 办 ED; 时， Sy (0) 到 38 或 1 一 Sy (9) 之 28 
二 者 必 有 至 少 成 立 其 一 , 放 有 
| 可 四 日 -可 DT) MAACONESAOLAO 


<| ,eG -WIT OT drdy>0, 当 er0. 


+ 省 je 


由 此 式 及 (6.8.59) 可 知 , 对 任 给 9> 0 可 找到 。 (>>0 充分 小 ,使 
对 任何 画 定 的 e 0<<8 近 87))，(6.3.58) 式 的 右边 当 站 充分 大 时 
' 小 于 8， 册 此, 从 关系 式 

Ws= |‖ Fe-$) tyoy$)]. 


—c 


"Ky Ext dy wv ary) 


At A 
站 
Kyl) Ky a (wm dy Cy) 
出 发 , 取 定 一 个 8, 0<s<<e 只, 令 入 >oo, 利用 (6.8.58), 得 
"+ J DT ddy 


> lim Sup Wx lim inf Wy” 


十 中 wT wT Of dw dy 


1 


在 此 式 中 先 俩 8 0 次 悟 四 0, 得 
lim W»~ 中 vWDImT ddy. (6.3.60) 


现在 只 竹下 证 明 (6.8.56) 中 的 最 后 一 个 等 式 . 因为 , 车 此 式 得 
证 ， 则 由 > (Go 在 (0, 办 内 不 为 常数 ,可知 6.8.60) 右边 的 积分 
大 于 0. 


2 | sD7 WT waa -D7 [a7 Jay 


er<y 1 


-| Ba -70] By7 的 一 | 7 warldy— 1, 
= | DT Woy ya 


=- 7 a -2a -fT (Wart2f vr (way, 


= 15 = 


n= | 2 -WT dsdy 
= 7@ [24 -D7 waylae 
-| TW —2(—2) 7 (0) +2| J (Way a 


——2f drt2| wT (odo? 并 了 Gy 了 全 am 
考虑 到 机 
2 Ii To Waray- ETT Wd 7 das), 


Oem<p<1 


由 以 上 诸 式 得 到 
2 | sDI Taray= il 


-ae 人 |， To) dw), (6.8.61) 
定理 证 毕 . 
在 王 , 好 只 相差 一 刻度 参数 ， 或 同时 有 位 置 一 刻度 参 歼 差别 
的 情况 , 类似 的 结 果 及 其 证 明 仍 成 立 . 


由 6,8. 人 LIL) 附带 得 到 以 下 的 重要 事实 , 当 五 = 时 ,有 
uz) 7 (wy dg, (6.3.62) 


o% = a [人 Peace- (| Tae) ]. (6.3.63) 


( 败 ) 满 足 定理 人.3. 工 的 条 件 的 一 个 重要 情况 


满足 定理 6.3,1 的 条 件 (4), (bj, (0) 的 最 重要 情况 是 Jr 人) 
与 去 无关: Vy(w) 一 V (8), 而 (8) 满足 条 件 (0) ， 在 (二 ) 中 提 到 
的 五 个 检验 统计 量 中 , 有 四 个 属于 这 种 情况 ， 

另 一 个 重要 情况 就 是 以 Fisher-Yates 统计 其 为 代表 的 那 种 
形式 .下 面 的 定理 解决 了 关于 这 种 统计 其 满足 条 件 @&，(b)， 
C0) 的 问题 . 


= 人 性。 


定理 6.8.5.。 设 太 (ww) 为 一 其 均值 存在 有 限 的 , 且 在 集合 {2: 
0 了 (wv) 过 1} 上 严 增 前 一 维 连 续 分 布 函 数 , 以 了 人) 记 玉 (x) 的 反 
郴 数 ， 

设 芝山 所 :… 达 证 0w) 为 自分 布 五 中 抽出 的 大 小 为 玉 的 有 序 样 
本 , 记 @y( 们 = 且 (于 一 1 出 aw( 匀 按 以 前 指出 的 方式 
决定 Jx(tw)， 册 

lim J (0) 二 J 0， 对 任何 E01， 
且 若 v 满足 条 件 (0}), J 必 也 满足 条 件 (由). 

证 .我们 只 证 明定 理 的 前 半 , 因为 后 半 部 分 的 证 虹 涉 及 很 元 
长 繁复 的 分 析 推 理 ， 恕 有 必要 , 读者 可 参看 [9], Pp. 408. 

首先 明确 : 在 定理 假定 之 下 , BE(X) 存在 有 限 . 这 由 

BUXwl) < iXwl)=B(S (X11)= NE Xl) 一 oo 
得 出 

现在 任 取 纪 0<t<1， 显 然 上 内 需 证 有 明 ， 当 六 7co, txoo 击 

入 -时 ,有 


lim BFEw) 一 了 0， 
为 此 注意 天 ( 莹 由 一 Do DSSUr 为 自 RO, 1) 中 朱 得 的 大 
沙 为 六 的 有 序 样 本 ， 由 此 易 知 ( 见 从 .1.8) 式 ), 五 (了 的 密度 
为 


Fw) -x( 2 je 一)* 人 0<w 之 1， 其 外 为 0， 


从 而 ， 注意 到 太一 J (UD), 得 
BCX -7GO Ts| LTO TD Fr de. (6.3.64) 


任 给 se> 册 由 (8) 在 0, DD 内 的 连续 性 ,存在 1 0<m<maz (的 
1 一 埠 , 使 当 |2 一 wj 号 时 ， 有 | 08) 一 J | se/2， 其次, 注意 


到 在 0<osl 内 ,sr1(1 一 坊 * 了 + 为 单 峰 孙 数 ,在 太 二 处 到 最 大 


值 , 考虑 到 入 -> 当 太 充分 大 时 -2 E 世 一 % w+ 咖 , 这 时 有 


» 1T 


Tt i 


gup {ftw) [so:0<o<1, |s—ul 六 从 
«max [fn vw—D, Fmt 
我 们 来 证 明 上 式 右 端 当 W->co 时 ， 有 极限 0， 以 fin(u 一 办 为 
例 . 考虑 到 W->oo, >oo, 在 uwE (0 1), 根据 Stizling 公式 ( 妇 
《6.1.10)) 易 得 
log fm(u—) =0(1) +Ir=0(D) +0+ 吉 logN 


+G-Dlg [sr -nD]+t -de [ut ]. 


此 处 5= 一 坷 log (ame* 人 L 一切 由， 而 lmo(D=0, 注意 到 市 一 的 
人 <maxta 工 一 内 以 及 初等 不 等 式 
log (L 二 办 二 sz 一 于 双 当 一 1<z<1,， (6.3.69) 


担当 六 一 ce 时 ， 


log fmlu—D) ~o(D) +otN [utoll)Jlog [1—2+00D) | 


+N[1~uto(D]log {1+ 2 to +31log No(l) +o 


+Ns+oCD] 人 全 +oG -于 (全 +oG) 


+N[1—wt+o(l)] { I +o(1) -于 (2 +oG) 上 


+ 下 logy=-oCD+e+y[ mn +o(D]| 


+ 二 og N>—o0. 


这 征明 了 lim fm(w 一 D0， 辐 理 lim fytwt+D =0D， 所 以 ， 记 
D= 《0， 琵 一 条 这 《十 分， 了 二， 有 
[和 


国 (G 罗 -7 的 1 办- 的 UpoGOa 
+ 7 四 -7 tea 
<§+o df TO dtl 1)<s, 


当 久 充 分 大 , 这 是 因为 根据 本 定理 假定 
fl ef lelar Gt) <o0, 


而 lim o(1) =0. 这 样 我 们 证 明了 
lim ya 他) -J (0), 
从 而 证 明了 本 定理 的 前 闪 ， 

例 6.3.1。 千 Fisher-Yateg 检 葵 来 说 ,有 了 F{m) = 古 (w) 而 
(的 一 廿 人， 此 处 功 和 东江 分 别 为 下 避 巡 的 分 布 通 数 及 其 
反 函 数 ， 训 算 y (ze) 的 值 多 等 于 解 方程 s 一 安 ()， 我 们 考 赴 当 
gw->1 时 (Cw) 的 状况 ,zz 一 0 的 铺 沈 可 类 似 地 考虑 之 . 

注意 当 2->1 时 , yc， 由 

1~o-1—6() = 总 人 as 


es 


1 - 
te os 
Ay 2ATY | 


1 
~ 22m 


故 一 而 ( 匀 庆 1 一 6 名 /3 


了 
~ Ty 
注意 到 Fe 当 y>0 时 为 下 降 函 数 , 故 若 固 定 乡 而 找 信 ,至 


将 有 镶 基 六 但 
log -于 妈 +log 扩 + 下 log (2m) >g8/2, 
当 go 于 《 因 这 时 gm 一 seo, 政 log 败 盖 人 的 。， 故 
2log .二 让 < DD- 
旬 <( og -==) 一 加 当 wl 


si19» 


可 fo 一 更 -0 一 和 宝 久 把 在 一 二 于， 当 xw~1， 叉 由 
rr 1 g—V/2 


六 YY 六 
知 TO 1- | 型 一 -Vm MV Dm er/ sy Om ar/ < Dm (Iw) 


当 w~1， 这 证 明了 在 x=1 的 一 端 , J (%) 二 $7 (满足 定理 6.3.1 
的 条 性 (中 , 在 0 的 一 端 同 样 证 明 。 根 据 定 理 6.3.5 及 6.3.1, 
Hisber-Yateg 统计 量 有 新 近 正 态 性 . 


《 九 ) 多 样本 的 情况 


以 上 几 段 对 两 样本 情况 讨论 的 秩 次 统计 景 理论 ， 可 以 用 显 热 
的 方式 推广 到 多 样本 的 情形 ，。 出 于 没有 性 何 本 质 上 的 新 东西 ， 我 
们 只 限于 将 结果 氢 述 如 下 . 

设 吾 1 14 唱 为 抽 自 具 一 维 连 续 
分 布 加 ,…, ,的 总 体 中 的 ii 记 .样本 ，aw( 如 及 由 axwtb) 产生 
的 定义 于 (0, 的 函数 yw， 与 两 样本 情况 无 异 、 将 合 样本 
到 it 有 mw 按 大 小 次 序 排列 , 得 了 Zoy 攻 之 人 Zor 友 一 明寺 … 十 
和 分 别 以 Ra, Fin, 记 芭 n， Sy i 在 合 样本 中 的 秩 ， 即 

y= Zep 了 一 二 ,Wh tl ,0, 
考虑 统计 和 是 了 一 (ar sy 了 ro 其 中 


To 去 加 oO | |ar Co), 


=] + 8, 


而 五 名人) 为 下 gn， …， 了, 的 经 验 分 布 医 数 ， 
Huy (%) | MFO), NM—-. 
吾 y (Ww) 即 为 合 冬 本 五 14，…，wor 的 经 验 分 布丁 数 
定理 6.8.6， 设 当 入 yco 时 ,人 玉 E (0, 直 ,% 一 1 


又 定理 6,3.1 的 假定 (a)、(b), (0) 而 成 立 (在 假定 中 改 了 to) 
为 FE), 地 一 二， “ 全 ， 唱 当 N—00 时 ， 有 
* BO 。 


VE OT ps) -了 NO, A), pn Ge ep 
A (gi ono ‘6.3.66) 
其 中 pm- TIH (IdF (WD), H (0) -个 2 人， 
而 
cj 一 > | |4 Ge WAP dF (Cy) 
二 了 


力 


二 用 各 Go warH @ -mF (eaLH WnPy)1. 
(6.3.67) 
Ci 一 之 aa | Ear, +A, am AF; (Y) 


rr 


-| [de 幼 十 4 Ja (DALH () — MP (0)] 


于 y+ Asly, Dao AH wy) 一 Pr)]， 
" i (6.3.68) 
此 处 
Aylw, 的 一 下 2) [L— Pi I LH (0 1 LH (gy)], 
D=1{(%, 肋 :一 co<0<Y 一 oo， 
证 明 过 程 与 定理 6.3.1 相似 , 先 将 了 wm 表 为 
Treat 二 Bas+ Bomt Ca 
一 
其 中 
pri 人 TLH (IaF, Co), 


Bim~ 人 TLH wadLPY(e) ~ Fle)] 
Bom=| [Hy (0) —H (OITLH (oIapy(e), 


Cini = 


-Hr) By wTCH Wanye), 


= $2L = 


Can 一 | Hy — HI IH JapY eo) — File)], 


cor= 人 人 人 有 四 -7IEO] 


(TA) HD) CH (1) arg 四 


Csw 一 -人 | 7 Hx(o) )— 7 
与 定理 6.3.1 一 样 , 可 证 
VEOm——> 0, 
当 入 一 oo, 因此 MB (Ty 一 pw) 之 极限 分 布 与 
Sy = VN (Bm Bowi, "2 Biwo + Bayo)' 
之 极限 分 布 同 ， 采 用 与 (三 ) 完 全 类 似 前 方法 , 得 


Bon 二 Bawr 宫 去 - 加 下 CO 


rH) aps. 


其 中 
Bol(X) =— [BF -EB (TE), dh 


BiCXW ~ [7 (HORY) — OBE | 
-a[7H (FD) -BZD], 
而 Brlw) ~| TH (w]dPo(y). 放 


-Nv tee “rr, Biwet Bawo) 


-YD BD))' 


p> 识 Y 计 Q.. (6.3.69) 


显然 ，@@，…， 0 相互 独立 , 且 当 mr>oo 时 ， 由 多维 独立 同 分 布 
情况 下 的 中 心 极限 定理 可 知 


Q» —» NO, 4， i (6.3.70) 


二 首富 


其 中 A= (qf) exe 十 (Bu (Xi), ?3s BurlTn))! 的 苏 方差 阵 . 
用 (三 ) 中 的 方法 , 不 难 算出 


-2() 4 Dapidapy), sits, (0.3.7D 
op=2] a WAH -Hr Ja [aw- ply) | 


(6 .3.72) 
< 加 =( 全) 出 4 WA le) dP ly) 


+ 由 4 oaF, (wdF,()], ji LF¥ jk (6.3.73) 


o 史 ~ -全 | 人 Dar (wa [HW — Fy]| 
ae dam [HW -NS Fe |, iss. 
(6.3.74) 


由 谷 ,3.69)，(6.3.70)， 及 -从 请 一 6 得 
Sy wl 宇 元 4,), 

其 中 ,一 {go 纵 ) wo 由 了 3.71) 一 个 .8.7 决定 。 不 难 验 证 
> .4 一 一 必 ， A= (Oe) ove 


访 记 


由 人 @.8.67) 和 (6.3.68) 决定 ， 这 证 明了 定理 6.8.6. 
注 。 由 于 ZT 的 各 分 量 人 Pm *…, Two 之 闻 有 线性 关系 ， 


2 mT ax (2) = Ay, 
知 要 必 为 降 秩 的 ， 为 了 得 到 非 异 正 态 分 布 ,必须 在 Tw 中 丢掉 一 


个 分 量 , 例如 工 we. 
在 再 三 二 … 三 可 的 场合 , 不 难 算 出 


ou 4a(e-1), HT 一 4 ha (6.3.7 乒 


此 处 4 ao (| zsz) . 


又 ， 在 页 人 一 到 地 十 的 ， $=1, “人 的 情况 ， 苍 各 总 体 分 布 
只 相差 一 个 位 置 参数 时 , 成 立 着 与 定理 6.8.4 类 似 的 结果 ， 


《十 ) 某 些 重要 的 两 样本 和 多 样本 秩 检 验 


应 用 定理 6.3, 江 和 6.3.6， 可 以 得 到 一 些 关 于 两 样本 问题 和 
多 样本 问题 的 秩 检 验 ， 今 择 其 重要 者 例 举 如 下 ; 

1. Wilooxon 检验 .这 基 一 个 两 样本 秩 检验 . 相当 于 了 (由 = 
“的 情况 ， 设 玉 1，… 呈 m 了 1 了。 分 布 天 和 局 的 意义 同 
前 , 则 


Ty Bt Re), 


豆 : 为 二 :在 全 样本 中 之 特 ， 而 当 fF= 人 好 时 ， 


pr 一 | .sdz=172， = [ao “dz) |- pi 


于 是 由 定理 3.6.1 得 到 , 当 也 =G 以 及 守 一 XE (0, 1 时 ， 


2(B1t +Ry) ~mN LI, wi 
和 NX(0, D). 


不 难 着 出， 这 与 用 0- 统 计量 理 论 所 得 出 的 同一 问题 的 结果 
(6.2.19) 是 等 价 的 .关于 使 用 这 一 极限 分 布 类 检验 了 ==G 的 方 
法 ,已 在 例 6.2.1 中 讨论 过 了 . 

2. Fisher-Yatea 检验 ， 这 相当 于 J(2) = 者 -12)， 人 -+ 为 
六 人 人) 的 分 布 函 数 二 的 反 函 数 ， 当 了 == 届 时 ,有 


j= |， (四 dz | og (wdz=0, 
1 oa 
-2 产 的 加 -三 | eg do 


因而 由 定理 3.6.1， 在 了 =G 以 及 家 一 XE C0, DD 时 ， 


工 
VY Tr- NO, D, 


+ 3 


Dy 一 训 了 (Zao), Zw<…<Zon 是 到 自 太 人 0, 二 的 大 小 为 术 的 


次 序 样本 ,及 为 子 , 在 合 样 本 中 的 秩 ， 
使 用 这 个 极 服 分布 来 检验 了 三 9 的 方法 与 例 6.2,1 一 样 。 钢 
如 ,以 


Te 
Tu> 8% 十 考 2, 


为 否定 城 的 检验 , 适合 于 对 立 假 设 信 (9) 圭 卫 t 十 间 ,9>>0 的 情况 ， 
而 以 


am 
ES EN pe Zora 
为 否定 域 的 检验 , 则 适合 于 对 立 假设 全 (wm) 三 F(t 十 的 ,， 80 的 情 
沈 . 
为 了 讨论 多 样本 问题 , 需要 下 面 的 结 时 . 
引 理 6.3.8.， 在 定理 6.3. 6 的 记号 和 条 件 下 , 若 瑟 ==… 三 Fo， 
则 当 六 一 oo 时 ， 
A > ne Tn Oo— Wns)? 一 > 人 1 6.383.70 
证 。 由 定理 6.3.6 及 和 妈 分 布 的 性 质 廊 知 计 一 20 时 ， 
多, I 2 (6.3.77) 
这 里 什 ,= MHGOy 一 pm …， ws 一 poD5 4 是 由 半期 
去 最 后 一 行 一 列 所 得 . 
_ 利用 公式 
(B+ruv) = Bi~ (Bu (Bo (+a Biv), 
此 处 吾 为 了 阶 潢 秩 方 阵 , ,为 7 维 列 疝 量 , 且 1+w 有 B10 
由 这 个 公式 及 避 .8.75) 式 , 得 到 


一 ， I 1 1 
二 一 fd -一 .一 ? 入 
4 ( ing ( Mm uv) 4 
(gf = (IL, 3 DD”, ?= 《一 二 yg 一 了 7)， 
A ?diag (hy, 0 和 o -全 1 
二 Chi yg Xu- (ha, NG- Sh) 
tal 


a 


说 十 和 和 ao + Nhe_ ao 
JiAaA Ne ha 十 入 Azho_1/ he A- 


MNo af ho ake io No it he fhe 
由 此 易 得 
DAPy = A | N DT pd 
tN (Sm Tm)) Ai] (6.3.78) 
如 果 在 上 式 中 以 名- 代 ju 则 极限 分 布 仍 无 变化 , 此 因 出 (6.3.77) 
己基 每 个 有 CPs_hos) ?有 极限 分 而 A 一 名 一 oDD, 因此 , 这样 
代替 的 结果 只 相差 一 个 ool) 的 量 ， 而 不 影响 其 极限 分 布 ， 现 证 
ND) 0, Nr (6.3.70) 
为 此 ， 将 Pm 才 为 um+ 之 Bon 识 Crw， 并 根据 诸 Cav 皆 为 
oo(W-， 可 向 
Nd | 
-|[ 窜 全 CBserBoo+oo(C-9] 
由 此 式 可 知 为 证 《6.8.79), 只 需 证 
I N(D CBivt Bao) 一 >0 N>o0, (6.3.80) 
但 召 [Buw+ Bam] =0, 放 
BC -Var( 癌 侣 (Bunet Bard ), 
而 
Ce 车)aa( 和 和 
一 (Ca (6.3.81) 
此 本 由 4 的 形状 及 寥 ‰~1 得 出 .由 (I#) -0 及 (6.3.81) 得 


* 


(6.3.80), 因而 证 明了 (6.3.79)， 所 以 


| 2 和 Ty Wt) ) 


#4=1 


—N [- 入 (Twe— Wwe) 十 p> 六 (Tm ona) ] 
= {rp oN ] 
= [1+o(DIN (各) Cuts)? (6.3.82) 


如 上 所 指出 ,在 (6.3.78) 中 改 为 为 - 淖 , 不 影响 极限 分 布 。 这 一 


市 实 结 合 46.3.82) 和 人吉.3.7D, 立即 得 到 (6.3.76)， 引 理 证 毕 ， 
注意 到 当 所 三 … 寺 Fo 时, 有 


ps 一 | 7) drma 
为 已 知 , 得 到 多 样本 假设 玖 二 … 兰 页 的 一 全 检验 如 下 : 当 
站 Din (Ty— 0 x2 (0m) 


时 否定 , 否则 接受 .以 下 考 曲 两 个 重要 特例 ， 
3. 玫 rmskal Wallis 检验 .相当 于 到 wo 一 3， 取 wo = 


工 
二 It 十 Dx]， 则 


Tys BR, $=1, +, 0, 


-Lt 

{A 二 1) ns 
其 中 Ri 为 疏 1， "ny 革 m 在 合 样本 定 ， 0, 人 im 让 下 ma 
Xe 中 之 秩 之 和 ， 又 a- | 7Cadz-j sdo-1/23， 因此 按 引 至 


6.3.8， 当 古寺 "二 Fo 时 ， 统计 量 


有 [jac(Geaz) ] 加 ww 和 -一 ) 


-2[-a 避 全 -二 


Sm - 2 $1 -一 


» B27 。 


当 和 Nyco 时 前 分 布 渐 近 于 妈 4。，Kruakal 和 Wallis 取 与 家 浙 近 
等 价 的 统计 量 
> Re/m— 3(N+ DD. 


-yD 安 
而 以 五 关 人 1 人) 为 假设 本 三 … 三 到, 的 否定 域 . 
4. 吕 Oi 检验， 这 是 两 祥 本 情况 下 的 Fisher-Yates 检验 的 推 
广 ， 相 应 于 了 Ge 一面 "1(w)， 与 两 样本 情况 的 计算 类 似 , 得 


01~S /mn 
这 里 俯 = 遍 如 (Zim)， Za<…<Zw 为 抽 自 各 (0, 二 的 大 小 为 
的 次 序 样本 ，Ra，…，Rw 为 卫 4,，…， 玉 ,在 合 样 本 中 之 秩 . 
当 假 设 本 二 二 到， 成 立 且 - 攻 一 NE (0， 1] ,3 一 1 ee 时 ， 有 


加 -一 > 好， 利用 这 个 极 腿 分 布 , 可 以 取 Ci2st(o) 作为 否定 
域 . 


r 


$6.4， 置 换 检 验 


{一 ) 置换 检验 与 线性 置换 统计 量 


置 手 检验 {Permutation test 是 基于 Jigher 引进 的 “随机 
化 原则 ”CRandomization Principlel 克 一 种 统计 检验 法 (Fisher， 
The Design of Experiments, Hafner Publishing Co. Ine. 1961). 
Fisher 引进 这 个 方法 , 是 想 把 通常 的 基于 正 态 . 独立 、 等 方差 假设 
的 方差 分 析 、 置 于 更 现实 的 基础 上 ， 读 者 在 [5] 和 全 1j 中 , 可 和 找 
到 关于 这 个 问题 的 很 好 的 谢 述 . 

我 们 举 一 个 最 简单 的 例子 来 说 明 有 关 的 概念 。 设 我 们 要 检验 
某 一 处 理 疾 有 无 效应 ， 拿 召 和 "对照 " 4 去 比较 4 也 可 以 是 时 
就 在 使 用 的 某 种 处 理 . 例如 , 吕 可 以 是 一 种 治疗 往 血 压 的 新 药 ， 
而 4 是 一 种 早已 在 使 用 的 成 药 ， 为 了 作 这 个 比较 , 找 名 十 m% 个 试 
验 单元 (在 上 例 中 , 每 个 试验 单元 就 是 一 个 高 血压 患者 )， 将 其 分 
成 两 部 分 , 一 部 分 包含 % 个 单元 , 对 它们 施加 处 理 4， 男 一 部 分 


" B28» 


包含 和 个 单元 , 对 之 施加 处 理 B, 斯 得 试验 结果 分 别 记 为 是 2 …*， 
也 mn 和 了 1， yg Y,. 

在 常见 的 正 态 , 独立 , 等 方差 假定 下 , 这 问题 的 统计 模型 可 以 
这 样 提出 ; 想 定 这 mr 个 单元 是 从 一 个 很 大 的 ( 即 包括 极 多 的 试 
验 单元 的 ) 总 体 中 随机 地 抽出 的 . 当 不 施 如 任何 处 理 时 , 假定 我 
们 感 兴 趣 的 指标 ZC 在 上 出 中 ， 就 是 血压 ) 在 该 总 体 中 的 分 布 ， 为 
Nt oa， 慨 定 施加 处 理 和 4 时 , 个 体 的 指标 增 圳 &'， 而 在 施加 处 
理 吾 时 ,个 体 的 指标 虽 增 加 冯 . 这 时 ，4, B 的 比较 就 转化 为 @',， 
的 比较 ， 由 于 总 体 极 大 而 mr 十 nw 个 试验 单元 只 是 随机 地 从 该 总 全 
中 抽出 的 航 小 的 一 部 分 , 自然 地 可 假定 了 1…, 斑 m, 了 1 -…， 了， 独 
立 ,， ZN te, oo =Na, on, t=1,, mm Pi~ 二 
gD 一 机体 ，o j=1 = ti bb 十 如， 0， 站 的 比较 
问题 ,在 这 个 模型 之 下 , 就 提成 常见 的 两 个 正 态 分 布 ( 方 差 相 同 ) 的 
均值 的 比较 问题 ， 

从 上 面 的 分 析 看 到 ; 通常 正 态 等 方差 模型 的 适用 , 取决 于 试验 
的 背景 是 否 符 合 于 所 提 的 要 求 ， 寻 不 论 指 标 分 布 的 正 态 性 假定 不 
必 是 现实 的 , 就 拿 所 使 用 的 试验 材料 来 说 ， 在 许多 具体 场合 下 ,无 
论 就 其 来 源 和 获得 方式 来 说 , 都 不 必 满 足 所 要 求 的 条 忻 , 即 , 它们 
是 从 一 个 大 共同 质 的 总 体 中 随机 地 抽取 的 ， 在 这 种 情况 下 ,上 曾 
所 提出 的 正 态 等 方差 模型 及 基于 它 的 两 样本 术 检 验 的 理论 根据 ， 
都 已 失效 .Fisher 提出 了 适合 于 这 种 情况 的 更 自然 的 统计 模型， 
根据 这 种 模型 , 所 得 结论 只 适用 于 已 做 试验 的 那些 个 体 的 范 男 上 内， 
然而 , 有 兴趣 的 是 : 传统 的 正 态 方差 分 析 的 方法 在 形式 上 仍 能 用 于 
这 种 模型 . 在 上 例 中 ,这 就 是 措 两 样本 姑 检 验 仍 适用 (在 以 后 说 
明 的 意义 上 )， 这 个 并 型 的 基础 , 就 是 Fisher 提出 的 随机 化 原则 }, 
我 位 拿 上 面 的 例子 来 作 说 明 . 

设 这 zr 二 hn 个 试验 单元 的 指标 值 依次 为 而, …', amsm， 设想 
处 理 4. 8 的 效果 完全 一 样 ， 由 于 问题 在 于 比较 4,，B, 不 妨 设 它 
们 对 每 个 个 体 的 效应 都 为 0。 设想 在 分 配 试验 单元 时 ， 是 完全 随 
机 地 进行 的 ， 这 可 以 通过 把 各 十 #9 个 试验 单元 尾音 排 成 一 询 ( 江 


a 2 。 


有 (ma 十 中 上 个 排 法 )， 把 前 面 m 个 施 辑 处理 4， 后 半 个 施加 处 理 
瑟 ， 这 时 , 数据 焉 4， …， 本 mm 无非 就 是 只 …，omta 中 随机 地 取出 
的 mm 个 ( 剩 下 的 ”个 构成 了 5， 工 败 ， 这 样 一 来 , 如 果 我 们 仍 计 
算 两 样本 上 统计 量 


1 i 


二 i 到 ,9 ， 号 _T? 
+ 7 


(6.4.1) 


则 上 的 分 布 是 : 它 一 共 能 取 (me 十 四 [个 值 (其 中 有 很 多 一 样 的 )， 
每 一 个 的 概率 都 是 [Lm 十 9 上 ， 这 些 值 是 这 样 得 来 的 ， 每 次 把 
nt 排 成 一 列 ， 把 前 mw 个 作为 至 1，…， 开 mw。， 后 w 个 作为 
了 这 就 可 以 由 6-4. 人 式 算出 一 个 t+ 值 ， 这 样 一 共 得 
到 km 十 1 个 二 值 , 记 为 :tomtny. 

如 果 刀 ,， 旦 的 效应 一 样 ， 则 如 上 所 指出 的 ， 每 个 妇 有 均等 概 
率 . 但 是 ,如 果 在 这 mm 十 nn 个 试验 单元 上 ,8B 的 效应 比 4 大 , 则 由 
试验 数据 所 算出 的 那个 上 人民, 记 为 二 ,将 倾向 于 取 三 ,tenrs 中 
较 大 的 那些 值 (假定 效应 大 时 , 指标 值 增加 )。 这 样 我 们 就 得 到 一 
个 检验 法 ; 将 全 部 碳 , 如 ,，… 按 大 小 排列 成 纪 ) 生 四 0 实 … 裤 不 mr 
选取 一 个 名 然后 当 闪 < 如) 时, 接受 零 假设 五 :4 五 效 应 一 样 ”， 
当 红 >tm 时 ， 则 否定 吾 . 于 的 选择 根据 检验 的 水 平面 定 ， 例 
如 , 当 名 十 和 充分 大 时 可 取 夺 = [Cm 十 区 1 一 的 ], 车 (十 册 上 其 
小 , 则 可 使 用 随机 北 的 检验 ， 

上 述 讨 论 中 的 主要 点 在 于 : 不 用 对 这 各 十 n 个 试验 单元 的 来 
历 作 任 何 假定 ， 就 能 构造 一 个 在 统计 上 完全 健全 的 检验 ， 这 个 检 
验 是 基于 m，…，ante 的 一 切 可 能 的 置换 , 因而 叫 置换 检验 ， 

然而 , 要 基体 实 现 这 个 检验 过 程 却 远 非 易 事 , 国 为 ,就 上 述 癌 


题 而 言 , 一 共 能 算出 ( ™" ) 个 不 同 的 主 值 (当然 , 这 中 间 也 可 以 


有 一 样 的 ), 当 m,n 不 太 小 时 , 涉及 的 计算 量 很 大 ， 所 以 ,自然 地 
想到 能 否 用 某 种 已 名 的 连续 分 布 来 盘 近 这 个 离散 分 布 ， 最 重要 最 


常见 的 是 正 楚 分布 。 如 果 能 证 明 上 的 分 布 近似 于 正 态 ， 就 可 以 根 
据 这 个 来 定 出 和 理 定 域 的 界限 ， 而 得 到 一 个 大 祥 本 轻 换 检验 关于 
象 1 这 种 类 型 的 所 谓 “ 置 换 统 计量 ”的 大 样本 理论 ， 构 成 本 节 的 主 
要 内 容 . 

就 本 例 而 言 可 作 一 重要 的 简化 : 将 # 表 为 

mmt+ no 2 . 
i= Vt 人 
下 -至 


3 (A 2) + 它 《FF ;一 
此 处 


Z-( 沪 Zt) ute 二 (二 二 Wnpa) /Cm 十 册 一 芝 


由 于 高 (一 妇 ? 二 识 国 一 妈 ?= 寞 -可 ?与 mw …。 qms 的 
排列 无 关 , 由 (6.4. 可 知 是 了 一 四 的 严 增 现 数 ， 因 此 , 基于 + 
的 置换 检验 ， 与 基于 了 一 里 的 置换 检验 完全 一 样 ， 姑 不 沦 从 计算 
上 说 算 了 一 宣 比 算 + 方便 ,从 更 论 上 说 ,了 一 四 是 43，…, qm 的 
线性 函数 , 即 了 一 及 是 所 谓 “线性 置换 统计 量 ”， 关于 这 种 统计 量 
的 渐 近 正 态 性 问题, 移 成 以 下 几 眉 的 内 容 . 

置换 检验 的 另 一 重要 作用 是 作为 条 件 检验 来 使 用 ， 关 于 这 一 
点 到 后 面 再 讨论 

现在 来 给 出 线性 置换 统计 量 的 ~ 般 形 式 ， 拿 上 例 来 说 , 记 
在 一 名 十 和 令 


1 . 1 。 
b= mm 1 Ns i b=mtI, NN, 


再 令 (Z1,…， Zs) 为 一 随机 向 量 , 它 以 -六 的 概率 取 (az,…, an) 
之 尾 一 置换 (44,…， gn), 则 显然 , 了 一 于 的 置换 分 布 , 就 是 变量 
Iw -2 

在 通常 意义 下 的 分 布 : 


# 必 1 。 


一 般 地 ,假定 给 了 
- A, = (fed ny ty,}, B,= {0b, ry bx,}. 
这 里 ty bs 多 一 二 N,, 都 是 已 知 常数 . 设 (Ty, Wy 下 为 
一 随机 向 量 , 它 以 概率 -六 T- 取 (au …。 ar) 之 任 一 材 换 (zu 
tv) » 别 如 
蕊 = 这 
称 为 一 个 线性 置换 绕 计 量 . 
线性 置换 统计 量 也 本 以 如 下 表 出 ; 以 《Rs,…，Rx,) 记 一 个 随 
机 向 量 , 它 以 -六 下 的 概率 取 (1，…, 好 ) 的 任 一 置换 , 则 
b= br 
在 讨论 线性 置换 统计 量 的 极限 分 布 时 , 需要 考虑 一 系列 的 
一 {vt ty 而 or， 五. 一 (oa， byw 4 »=l1, 2, 机 


(6.4.2) 
其 中 lim N= eo, 而 


下 
-这 byttview p=1, 9, (6.4.9) 


(Rs …，Bow,) 为 一 随机 向 量 ,以 -于 二 的 概率 到 (L，…，F,) 的 
任 一 署 的 ， 记 要 讨论 的 就 是 当 ->co 时 ,五 的 极限 分 布 


(二) 基本 条 件 的 讨论 


关于 置换 统计 量 的 分 布 ，Pitman, Weloh 等 在 三 十 年 代 已 有 
所 讨论 。 他们 计算 某 些 在 方差 分 析 中 出 现 的 置换 统计 量 的 前 四 阶 
年 , 证 明 它 与 所 犹 测 的 极限 分 布 欧 前 四 有 阶 矩 接近 ， 这 自然 不 
能 作为 有 关 统 计量 依 分 布 收 敏 的 证 明 . 直到 1944 年 ，Wald 和 
Wolfowits 第 一 次 在 一 般 性 条 忻 下 证 明了 线性 置换 统计 看 的 渐 近 
正 态 性 , 到 1949 年 ，Noether 改进 了 Wald 和 Wolfowitg 的 结果 . 
1961 年 ，Hsjek 又 维 了 一 个 重大 的 改进 ， 在 叙述 并 证 明 这 些 结果 


n=”. 


之 前 ， 我 们 把 以 上 和 作者 提出 的 条 件 作 一 综合 性 葛 讨 论 ， 以 作为 准 
省 ， 
设 {4,}， {8B,} 如 (6.4.2)， 定 义 


一 1 总 
| MN, Ia Tt 
1 EY f= ，。 
Hr Ad) = MN, 全 (ui fy) 多 ?= 2, 3, » 


N 
Vr) = 部 名 je 一 到 | 了 一 二 ， 3, "yp 


RA = max dn— min on. 
l= hy eteN 


同样 地 ,有 65,, prs (BB), vr(BB)，BR,(B), 

考虑 以 下 三 组 条 忻 . 

1. 条 忻 斑 到 CWald-Wolfowitz,，1944). 称 {4,} 适合 共性 
WW, 痢 对 托 何 固定 的 T(r 一 2,，3,-…), 序列 

Hrs CA [ta CAY TTS, p=1, 2, 

是 有 界 的 (其 界 林 与 + 有关)， 

2. 条 件 人 ANoether, 1949) ， 称 {4,} 适合 条 件 N， 若 对 任何 
辕 定 的 rr 一 8, 4, …),， 有 


lim Ne 3) pr A)/ [reas (A)1" 0, 


条 件 下 W 和 再 带 窟 为 
WW:pn tA/ Le (DI =0{, r=3, 生 ， "ps (6.4.4) 
N:pr CA)/ Le CA oN ), r=8, 4, .…, (6.4.5) 


应 注意 的 是 OCI) 和 olD 是 指 固定 而 "xoo， 且 这 涉 的 常数 可 
与 + 有关. 
下 一 个 条 件 涉及 两 个 序列 {4,} 和 {8B,}， 为 方便 计 , 记 
t= (tn — ty) (By ~— By), 起 - 瓯 - 学 do, 
3. 条 件 MMotoo, 1957)。 称 {4,，B,} 满足 条 忻 则 ， 若 对 尾 
给 #0, 有 


cm 人 0, Ey/ oN), (6.4.6) 
下 面 来 讨论 这 些 条 件 的 某 些 等 价 形 式 ， 并 给 出 它们 之 间 的 某 
些 关 系 . 
1” 条件 
WW' :vw A) /Eva CAI = 00D), r=3, 4, + (6.4.7) 
与 条 件 WW' 等 价 . 


证 ， 显然 ,WW 一 WW， 反 过 来 ,车 条 件 WW 成 立 , 则 当 r 
为 偶数 时 ，(6.4.7) 成 立 ， 踢 存在 下 r(x 为 偶数 )， 玛 5,( 有 所 
下 [ad 对 一 切 w， 现 任 取 奇数 7 宇 3， 则 
Yr A EV A Fr Ad) 
Eel so A THIEL LY ,A 
= Erirke [YAS, v=1, 中 
这 证 明了 (6.4.7) 当 r 为 奇数 时 也 对 . 


2" 条 件 
如 ! A /TY A Io, T=8, 4, 
(6.4.8) 
与 条 件 N 等 价 . 
证 明 与 1° 完全 类 做。 
8 条件 以 与 


条 件 NN。: 存在 自然 数 *>2 至 
VrolA) /LY mA) oll), 
条 件 Ny: BR,CA)/NV pw td =0 (VN,) 
中 的 性 一 个 都 等 价 . 
证 ，N 寺 Ne 由 2° 推出 ， 现 证 Ne 一 Rio. 设 {4 小 满足 Na 但 
不 满足 Ns。, 则 存在 6>0 及 Te 中 致 BE, (4) 之 eVB Cz) 二 


-D3 由 于 Yn(4)>>- 计 -( 计 [RCO)] 有 
Lh > (村 ) “Ns (CFs (A), $=1, 2, 1 " 
这 说 明 ，(6.4.8) 中 的 数量 级 关系 对 任何 3 都 不 成 立 , 而 这 与 


» $B = 


TY Er rr 


{4 满足 条 件 jy 不 合 ， 
最 后 证 明 区 一 人 设 {4,} 满 是 记 Qa= Or RA) ’ bn 


- 1 蕊 - 
加 ,并 记 驴友 -部 0 则 lowm| <1， 因 为 


pw( 人 D 一 着- 这- )* 开 (4 
条 件 N 等 价 于 D, 一 总 oe “co, 当 vxoo， 但 当 +>3， 


pm A) | < 天 加 lo 6,|"R; (A), 

所 以 ， 

Ho CA [7 Ep, (A) 1 Ee No 之 [ow—51"/ Dr 
但 由 |exi 气 1 知 ews 一 | 所 2， 所 以 

3 [es 一 名 | re Sr 一 > {0,4— Oy) 2 2 2D 

从 而 

局 了 | CAY |/ Dees CA) J E22 DE >0, 
当 boo, 因为 吝 ~1>0 而 lim 卫 , = ce 


4 当 在 4,, B, 的 每 个 数 上 加 上 一 常数 (可 与 > 有关) 时 ， 不 
影响 它们 是 否 满 足 任 何 条 人 忻 (WW, 了 ,MD 这 一 性 质 ， 对 乘 上 一 
非 堆 常数 也 有 同一 结果 . 

证 明 是 显然 的 . . 

5° WW 过， 这 由 定义 直接 得 出 , 

6° 车 {4,} 和 {B,} 中 有 一 个 满足 条 件 WW 而 另 一 个 满足 
条 件 N, 则 {4,，B,} 满足 条 件 基 ( 这 可 以 记 为 (WW, N)=> MD). 

证 . 由 所 设 条 件 知 


羡 总 ag) /| 入 


-六 > 加 lowl" [二 村 oCNye, 
8 (8.4.9) 


+ Ba 。 


六 [es /( 党 dy oN 0) ， 


和 he 
(6.4.10) 
车 条 件 于 不成立 , 则 存在 0>0,，s>0 及 一 刘 {vx}， 至 
3 Ay/ oN,, k=1, 2, 
A lp 
这 时 
Hawsmled ds DD 00rsN,g, 
【二 {hd dr 
故 


awd/ (SB) oor Wadi Nada) 
Sl] 
= O08 INEOAD El, 2, 
这 显然 与 (6.4.10) 矛盾 . 
7” 若 {4,,，B,} 满足 条 件 M， 则 {4,} 和 {B,} 都 满足 条 件 对 
《这 可 以 记 为 M 坊 (N, N)). 
证 ， 用 反 证 法 , 设 {B 不 满足 N， 则 由 N 与 节 的 等 价 性 
( 见 3)， 知 {8,} 也 不 满足 NN,， 不 失 普 遍 性 设 记 =0, 对 一 切 v。 
这 时 存在 >0, 一 串 {zd 和 {到 
[Bl ov BN NV ow CI , d=1, 2, 


于 是 
Ge 
{C0 dE 0 
1! -二 a2 下 
vb a BD Nu} 
Hgys (A) hs CB) 
0 > 1 0 Az ap (A), (各 .和 44. 11Y 
人 land Pama DY ys 
由 于 1 ， 
2 3 
人 act Ny Ce < rr (4) 
得 出 


6.4.11) 式 的 有 边 字 C0? 一 6poon C4/pom (人 D 一 VW 一 a2， 取 
se 一 于， 由 恰 ,4.1 力 知 


* 6 » 


cs/ 本 > 有 oO 2 


[i 5 人 


这 与 {4,，B,} 满足 条 件 M 矛盾， 
适合 条 性 三 到 的 重要 例子 是 
4 一 {0,, py ry Oyy b,, Bb,, yy b,}, y=1, 2, 辆 由 站 
共 中 ,为 任意 常数 ， oD 有 Tw 个 ,By 及 个 ,而 


hE OO, DD), 


Typ i 

当 z 一 ce， 另 一 个 适合 条 件 WW 的 重要 俩 子 是 
Aw—= {1, 2, 3, 2, NY, N=1, 32,", 
这 些 简 单 事实 的 验证 留 给 读者 ， 
(三 ) 线性 置换 统计 量 的 渐 近 正 态 性 

投 . 
A, = {di yy oy ,}, B, = {8,1, ay Bw, ? p= 了, 2. …， 
“…， 太 sw) 为 一 随机 馈 量 ， 以 -太太 的 酸 率 取 《aaa es Mey) 
的 任 一 置换 ,而 


{a 


Xn 
五 一 合 pw 并 b=1, 2, 2® 
先 证 明 下 面 的 简单 引 理 . 

引 理 6 .4&. 工 .有 

MB 一 (6.4.12) 

al Var(L,) 一 eo av A) Wor (CB). 6.4,18) 

证 . 注意 到 三 , ph 匡 必 的 分 布 分 别 浪 
POX) ~ Hl 3 Nys 


P(Xu a Ry) = 万 ( 隐 二 1rma 8 
得 到 


BE 一 Go 和 ar = jar Cd), 各 一 十， 四 N,, 


ee 


Cov (Xu Ko) = RB ri (at) 
1 Ny 四 _ Ny 一 
We 


1 3 2_ 1 
-WW 这 人) 一 Td, 
从 而 yy y 
BL) = BB (KN) D2 bu NAb,. 
Var (I) = = Var(£) + 襄 A .dh 


一 hau(4) 六 本 一 二 


了 CA) 学 Do 
-asd) | 营 如 一 再 区 bm) + 本 一 襄 如 | 


b> 中信 6) ] 


1 Car (AY 3y (B) 站 


定理 6.24.1(Wald_Wolfowitz-Noether)， 若 {4,} 和 {B,} 中 
有 一 个 满足 条 件 WW 而 另 一 个 满足 条 件 本 则 当 s+->oo 时 ,有 


0 D. (6.4.14) 


-区 


此 定理 的 结论 是 1944 年 Wald 和 Wolfowitz 在 {4,} 和 1{8,} 
都 满足 条 件 砍 克 之 下 证 明 的 ( 见 Anm. Maih. Siatist., 1944, p. 
358) ，1949 年 Noeiher 推广 到 此 处 的 形式 (dnm. Math. Statist.， 
1949, p. 455) .证明 是 利用 概率 论 中 的 矩 收 伍 定 理 , 即 证 明 (也 一 
ju /0s 的 各 阶 矩 收 化 到 如 C0,1) 的 相应 阶 矩 ， 此 处 我 们 不 给 出 
这 个 证 明 , 因为 我 们 将 证 明 一 个 比 这 更 强 的 结果 . 
定理 6.4.2(Hajek)、 若 {4,} 和 {B,} 都 满足 条 忻 苇 则 
二 .4.19) 成 立 的 充 要 条 件 是 {4,,B,} 满足 条 性 M. 
此 定理 是 Hajek 在 1961 年 证 明 的 (4nnm. Waih. Siatint.， 
1961, p. 506)。 利用 《二 ) 中 证 明 的 各 条 件 之 间 的 关系 , 由 Hajek 


= SS > 


定理 立即 得 到 以 下 两 个 结论 ; 

1. 车 {4,}, {8B,} 中 有 一 个 满足 条 和 忻 WW, 另 一 个 满足 条 件 
区, 则 @.4.1D 成 立 ， 这 就 是 定理 6.4,1， 议 一 点 从 (二 ) 6° 推出 

2. 若 {4,，B,} 满足 条 件 M, 则 (6.4.1 人 成立, 这 一 点 从 (二 ) 
7° 挫 出 . 

定理 的 证 明 恢 赖 于 下 面 的 引 理 ， 

引 理 有 .和 4. 史 、 设 本 二 的 所 所 gr 济 一 襄 实 常数 , 定义 (0, 1] 
内 的 函数 (lh) 如 下 : 

aA) = GB /NN, t=1, 2, +…, WN, 

又 雇 ,Uz 记 自 (0, 了 中 抽出 的 谣 , 样本 ,以 咏 记 可 在 
如 ，…, Ux 中 的 秩 ， 则 


Bad -af( 呈 外 <2 ma ]a, 一 5 广 j2 立 (er 一 四 下 
(6.4.15) 
证 ， | Bi Lo By 记 UV, ys Uy 的 次 序 统计 最 ， 则 


BC 一“ 合计 -于 站 ec -< 人 让， 


(6.4.16) 
我 们 来 考 虚 几 个 简单 情况 , 然后 达到 最 一 般 的 情况 . 
品 。 设 d= 一 tx 一人 0 琶 R414 二 "二 Wy 一， 
定义 
0, A<O, 
:w= >0, 


则 相应 于 上 述 序 列 的 a0) 为 ak 一 e( 和 一 千 ). 以 遇 记 Da 


Ux 中 小 于 方 的 个 数 ( 注意 中 ~B(W, 若 ))， 则 下 Z1。…，2x 的 
定义 知 2 若 信 < 下 ， 则 


1 


En pe es or a 


a[( 纪 一 并 ) 一 s( 入 -长 )-0， 当 i=1 oe, 民 ， 区 二 1, 1 WN, 
一 1， 当 4= 尼 十 二 … 下 . 


无 论 是 人 入 巨 还 是 如 > 下 都 得 到 
汝 [多 -四 -IE -al 
此 式 与 (6.4,16) 结合 得 出 
和 eg-e0- 寺 习 zL(z- 芍 -< 
A 让 
[让 
但 B[IR-EIN]<(BR- EY [FG], 
所 以 
sl(w- 罗 - E330- 克 


(6.4.17) 


b. 现 设 10， 这 时 相应 的 e() 可 家 为 
eB Grta 一 oae(x- 瑟 ) 

由 于 1~a( 守 由 上 式 得 
3 ~ 马 bp3| (grri— tr) (qe) 全 A) (每 Lp) ) 


-可 3 《gal 一 CE) (0g41O— on [LN — max (kK, 力 ]， 


(6.4.18) 


其 次 
[« 《2 一 cf 和 | = 六 [grid 一 Cry {gy — N+ 
*[s (2,— -es wy)j[e (2 言 )- a( 二 外 
由 于 s() 只 取 0 1 为 什 , 有 A 
[s(2.- 知 )- (一 )][s(2,~ 译 )- (所 | 


< {a(2.— PD ) el mx ED)]. 


将 此 式 与 (6.4.17) 和 人 8.4.19) 结合 , 得 
Cl 
< 写 守 (rw-enlgn-) 吉 RB [e212ED) 
~e( ms | } 


3 


| 3 (rr RE (41— 号 如 |。 ef ,一 ex) 


-se( 并 二 Des 让 让 


A 1 , 
< > 辫 (FL 一 好 区 ) (gO— ov 


Rel 守 


Bie (EK, | 


十 MN- N— 
< 宁 | 全 {Grr TE) (Gg44— 
Km™ = 
1 


这 rss—an) Can) (WN — max(K, ND. 


dl 


控 此 式 ， 从 .4.18) 以 及 


(Genan Goa) ~ (ew— a) =o, 
得 
9 
此 式 是 在 a 一 0 的 条 件 下 得 到 的 ， 若 0, 则 用 wm- 田代 ms 
4 一 1，…, 术 ,这 种 代替 不 影响 《6.4.20) 的 左边 ， 于 是 在 一 般 情 
沈 下 有 
Be) -a( 加 )] < 下 (ew-a) [Boo] 
(6.4.21) 
将 此 结果 用 于 一 ay< 一 q_i 所 … 忆 一， 这 相当 于 以 -ell 一 入 
代 s()， 显 然 ,此 代 玲 不 影响 (6.4.21) 左边 (因为 U0~ 有 (0, 2 一 
1-D~RCO, 1)， 故 有 
B[scm -a( 呈 让 < 动人 -四 四 -oo 下” 
{6.4.22) 
o， 现 取 任意 的 a( 和 )。 定义 
ar (A) -fe 若 a0) < 
a00 ,车 6Co) > 
a- (XY -fo 一 4 车 A) SG， 
0, 车 4 0) 守 6, 
此 处 5 为 m，…, as 的 算术 平均 ， 注 意 a+ 0) 和 a-(%) 当 为 和 在 
(0, 了 内 的 非 降 鼻 数 , 且 a(D = at (0 +a- GO， 故 由 (6.4.21) 及 
{6.4.22), 有 | 


Ela(0y -ea( 全 让 
-了 [edD -er (各 )+(e Oo (BD)] 
<2B|e OD- ( 知 )] +22[a-(00-o( 千 )] 


<2(xr 一 下 广 ( 于 (一 人 


* 42 » 


a 
+20-) (RD 
<2 max je-al 训 {( 避 ,0DD+ DN 
Ey 了 ze 
直人 2 max la 一 耻 广 [2 立 Cau—a) ?| 。 
引 理 证 毕 . 
现在 设 给 定 
4 一 (ca， ny Ce， B,— {bs, Uy Bun,}, v=1, 了 
一 N N 
设 加 一 下 一 由 名 一 1. 利用 Sys "3 ys 造 出 的 函 


数 记 次 Cp Ch) 。 以 UD, ry Uyx, 记 自 RO, 1) 中 抽出 的 iid. 样本 ， 
而 Bw 为 在 i, …, Uy, 中 的 秩 ， 则 


N MN 
L, 一 之 站 一 之 ez (Ru N) 


此 处 为 方便 计 已 假定 5 所 Gs 所 开 gw, 这 个 假定 显然 不 影响 天 
的 分 布 ， 记 
和 = 名 But, Do. 
引 理 8.4.8， 若 {4,} 满足 条 件 驴 ， 则 
lim EC(L,.— TH =—0. 
| 证 以 2 过 之 2Zy, 记 i…， Dn, 的 次 序 统 计量 , 则 
BR,r Fp, 
.Tbe ( N, )-w( N, 外 
注意 到 《Bi,，…， 上 yw,) 在 给 定 (Za …，Gr 时 的 条 和 忻 分 布 是 
它 以 于 的 概率 取 (L …， 玉 之 任 一 要 换 , 即 与 (Ra，…， 忌 oa) 


的 无 条 件 分 布 一 样 ,因此 , 再 利用 公式 二 .和 .13)， 得 
Elh,— TN) |Z, ny Ey,] =~ Var[lb,~T,|Z,, ny Zy,] 


一 Wi SE [sc -oH )] 


= FT 3 [a (UD — a (Boi Nol 2 


二 


此 处 用 入 吃 = ,和 总 怒 一 由 此 可 得 


BOL, Ty fo 0 0, (RW NI 
局 


Ni1 El[a, (UD oy (Ra/ Ny) 
使 用 (6.4.1 友 ,注意 到 一 0, 得 


BL, TN) ve 1 2 max |aw| Va 


«6 max leul /wv MN,. 
ade Ny 


由 于 {4,} 适合 条 件 N， 散 必 适 合 条 件 台 ,( 见 (二 ), 38°)， 不 难 收 
到 ， 在 此 处 {4,} 适合 条 件 N; 等 价 于 上 式 最 后 一 项 当 -ce 时 赵 
于 0, 于 是 证 明了 引 理 ， 

在 考 足 (一) /av 的 极限 分 布 时 , 不 失 普 遍 性 可 设 元 = 互 = 
0，jow( 娟 一 -二 -jo(4) 一 对 一 切 上 这 时 和 一 0, os 一 4， 于 
是 (一 ) /os 转化 为 在 {4,} 适合 条 件 了 时 , 根据 引 理 
6.4.3， 匡 , 与 ,有 同一 的 极限 分 布 ， 攻 问题 转化 为 求 了 了 ,一 > 
订 (0, 1) 的 条 件 ， 关 于 这 个 问题 可 引用 独立 和 的 弱 极 限 理论 的 标 
准 结果 , 我 们 将 其 写 为 下 面 的 

31 理 6.9.4. 催 对 任何 vy » 一 1， 2, ry 全 pl "yy 和 ui 独立 ， 


mh 7. 
BE(XW) 0, Var(Z) -省 oo~l 则 


Nu 
max oir—>0, 名 bd - 工 > NO, 1), B ro0, 
Bm 


ataNe 


同时 成 立 的 充 村 条 忻 为 : 对 任 给 s> 由 有 
lim 芝 | wapule) “0, (6.4.28) 


pos d=l1 


此 处 Fle) 为 互 。 的 分 布 函数 . 

证 明 见 [81, p. 295， 

定理 6.4.2 的 证 明 ， 假 定 {4,}，{B,} 都 满足 条 件 丁 ,不 失 
普遍 性 设 


二 


BB 0, js( 本 一 -下 je 人 (有 一 
对 一 斯 bp， 这 时 ( 玉 一 Neo= 玉 而 瑟 的 汲 限 分 布 (如 果 存 在 ) 与 
也 ,前 极 限 分 布 同 .但 

T, = > bu CU -> pt, 
这 里 太 ， "my Rm, 独立 ， 
EX) 一 bu fa (UN) 一 By = 0, 
oY 一 Var (Xt) 一 bi Var 《as 《CD 一 Diliys. Cd) = be 

因此 党 o3 一 训 克 .~ 而且 由 {满足 条 件 对 知 


max oi=— max U30, G vy-*o0., 
edi Ny let Ny 


所 以 , 由 引 理 6.4.4 了, 一 > 入 C0, 芒 的 充 要 条 件 为 .4.28), 其 
0 的 好 布 冰 数 . 但 显 类 


| zd hr) = 2 br, 
sine {dvb} 
于 是 得 到 充 要 笨 件 沟 ; 对 任 给 8>>0, 
> arbi 0 po, ， (6 .4.24) 
{ee Datitsms} 
1 
考虑 到 BH bl 


(6.4.24) 等 价 于 说 {4,，B,} 满足 条 件 M, 这 就 证 明了 定理 6.4.2. 

可 以 举 出 这 样 的 例子 ， 其 中 {4,}，{B,} 都 渍 足 条 件 NN, 但 
{4。，B,} 不 满足 条 件 M.， 因此 根据 定理 6.4.2， 当 {4 和 {8B,} 
都 满 下 条 件 气 时 ，46.4.14) 还 可 以 不 对 . 

文 ; 车 令 An— By= {1, 2, …， N}), 则 很 易 验 证 {Ay, By} 适 
合 条 件 页. 因此 由 4w， Bx 作成 的 线性 置换 统计 量 Lx， 根据 定理 
.4.23， 有 渐 近 正 态 人 性， 但 因 {4w} 和 {Bx} 都 不 满足 条 件 WW， 
定理 6.4.1 不 能 用 . 

在 有 些 癌 题 中 , 同时 涉及 若 于 个 线性 置换 统计 和 量 . 这 种 问题 
也 可 以 借助 于 定理 6.4.2 来 处 理 ， 以 后 将 多 到 这 种 例子. 


+ = 


(四 ) 定理 和 的 应 用 


例 §.4.1， 我 们 来 考 虚 本 节 开 始 时 提 刘 的 比 铣 两 个 处 埋 的 效 
应 的 例子 、 处 理 4, 8 的 数据 分 别 为 
到 2 …， 下 # 和 Ti, sy T,, 
根据 前 面 对 这 个 问题 所 作 的 分 析 ， 此 问题 的 跤 换 答 苍 娄 销 为 一 个 
1 1 1 


由 hy 一 {or ae 了 了 省 和 Br 

Tostit 为 了 使 用 大 样本 方法 , 我 们 设想 mm 二 
一 Wo 而 加 hE (0, 了 D, 又 Aw 为 一 个 序列 {hv} 中 的 一 员 ， 该 
序列 假定 满足 条 件 可， 在 所 设 的 条 件 下 , {Bj 满足 条 件 全 多， 于 
是 由 定理 6.4.1 知 , -二 2 到 (0 苇 , 其 中 的 和 0 按 公式 


从 .4.19 和 (6.4,13) 分 别 算出 为 
Mn= Nanby = 0, 


2 


? N 1 
一 了 A (4) po (BD 一 ee (4) 


Gy 一 


-7 
+ Fy:|. 
大 样本 单 边 置 换 检验 有 否定 城 (Zw 一 hw) /ow 之 Z。， 若 记 
p= FP¥)/ [DT tT)]" 


则 简单 计算 证 明 此 检验 的 否定 域 为 


万 > PO -5D _1 
1— ee 


-wT 
zo 内 者 (a) 一 I 一 a 决定 ， 若 按 两 样本 检验 , 则 否定 域 为 


可 1 
D>y 育 二 5 J 0. 


南 于 当 丈 很 大 时 ys ~ TR; 且 可 _a《@) 二 am 这 商 
个 检验 是 渐 近 一 致 的 ， 这 就 是 前 面 提 到 的 “两 样本 嫉 检验 仍 适 用 ” 
那 句 话 的 确切 解释 . 

例 6.4.2. 多 个 处 理 的 比较 问题 ， 这 是 上 全 的 自然 推广 设 
有 “个 处 理 了 了 要 比较 ， 一 共有 六 二 入 十 … 十 jw 个 试验 单 
元 ， 将 空 们 随机 地 分 为 6 堆 , 每 堆 的 个 数 依 次 为 人，…， ?个 分 别 
施加 姓 理 全 1 …, TT,. 

假定 在 试验 前 , 每 个 单元 有 一 已 知 的 指标 值 , 分 别 记 为 耐 ,*…*， 
ar。 假定 在 对 具 指 标 值 a 的 单元 施加 处 理 了; 时， 指标 值 改变 为 
斥 十 中， 于 是 诸 处 理 的 比较 就 转化 为 诸 负 的 比较 .而 零 假 设 是， 
“各 处 理 一 样 ”就 成 为 “和 =… 一 二 '， 由 于 涉及 的 是 处 理 之 癌 的 比 
较 , 不 妨 设 中，  …， 丁 之 公共 值 就 是 0。 在 这 神情 况 下 , 第 3 个 处 
理工 的 mw 个 试验 值 及 jz, …， 芝 n 无 非 就 是 从 三, …, axw 中 随 
机 隧 出 的 % 个 数 , 

在 道 常 方差 分 析 中 ， 关 于 本 问题 的 处 再 ， 是 假设 斑 41,…:， 


全 m5 0 on 相互 独立 ,让 bg 友人 Go， 了 
i 一 ]，，…, 0、 零 假设 五 前 检验 是 基于 五 统计 量 
1 < 。 
多 o—1 六 


TT 
Ns Xs 东 ，) 


(ZX， -记名 Do 科 - 广 癌 wZ 小 
在 上 述 正 态 和 假定 下 ， 当 零 假设 五 成 立时 有 .~ 了 oi,w_w 这 提供 
以 FP, wo 为 否定 域 的 Fa 检验 . 
如 果 这 六 个 供 实验 的 个 体 并 非 从 一 个 极 大 的 同 质 总 体 中 随 
机 抽 得 的 ， 则 上 述 关于 正 态 、 独 立 和 等 方 凑 的 假定 失去 依据 ， 然 
而 ， 根 据 与 两 个 处 理 情 况 下 的 同样 考虑 ， 可 以 提出 一 个 基于 上 述 


统计 量 多 的 一 个 置换 检验 ， 方 法 是 将 六 个 数 四 ，…，qr 排 成 一 
列 , 将 结果 就 作为 斑 n，…， 芝 ows 这 样 就 舌 出 一 个 多 值 .一 共 可 


vr 屋 芭 7 


算出 六 5 个 多 值 (其 中 有 很 密 相 同 的 )， 将 其 按 天 小 排列 为 .多 + 志 
nn 然后 取 一 个 界限 多 mw 视 实际 算出 的 多 什 . 多 ” 基 息 大 
于 .多 zx， 而 决定 是 否定 还 是 接受 豆 . 要 实现 这 个 检验 ， 涉 及 很 大 
量 的 计算 ， 因 此 就 希望 能 用 一 种 简单 的 连续 分 布 来 温 近 它 ， 下 面 
我 们 就 来 考虑 这 个 问题 ， 定 义 

Ax= {te, Fw} 


1 1 1 1 
ts Te 中 一 本 由 本 二 ee 和 
Bs | Nm HN 


在 BW 中 ,一 共有 。 眉 , 中 第 % 眉 ( 共 m 个 数 ) 中 每 个 数 为 二 -一 前 


外 , 共 余 各 外 (第 j 路 有 个 数 ) 中 每 个 数 都 是 一 亏 ， 假 定 当 -> 

oo 时 ， hE (0， 1D), €=1, :+, 0. 

Ei Lp 记 册 Anw 和 BY 产生 的 线性 君 挤 统计 量 ， 二 1 "人 

巾 1 
1 多 一 再 (LpP) = 0， 


Cf) Var (LP) ~ (二 一 这 Ca 
我 们 来 证 明 ， 著 {hw}" 适合 条 件 蕊 则 随机 向 量 
Ln (Dfa®, 1 LD fog) 
依 分 布 疲 化 于 6 一 1 维 正 恋 分 布 六 (0， 4A), 其 中 4A4= (oy) , 而 


六 、， 
-| TT CRY + 


3 j=1, oy 6 一 工 . 
1 3 = 


证 明 依 束 以 下 三 件 事实 ， 
1° 设 fy= Wm Wy 名 二 二， + wy 0, lim mu 二 好 存在 有 
限 , z=1,…, 0。 则 Bs ~ DimBY 满足 条 件 术 W， 这 可 以 由 BY 
切 在 此 我 们 管 化 了 记号 ， 当 至 变 人 必 时 ,了 [个 数 四 ， 06 跟 首 变化 ， 所 以 更 确 


若 地 应 将 45 记 为 {rp "Gy}》。 我们 这 里 简 记 为 {1 aw}、 
dd， 


的 具体 形式 经 过 简单 计算 得 出 ， 我 们 把 它 禄 给 读者 去 完成 . 
2”lim Oov (LP/o9，LP/o 久 ) oy， 为 证 此 ,将 菩 写 为 


0 一 尺 5 外 了 Z。 其 中 ( 玉 s，…, 玉 直 以 概率 万] 取 (e …， os) 的 
任 一 年 换 , 利用 (三 ) 中 证 明 的 关系 : 
VartXn) ~ 亏 3 CT 
Cov( 互 ， 互 力 一 -Ny D3 (m0) "= -WR Sy, 


得 
Cov (LO, LP) 


-Var (ZX Bb Cov (Ky, HD MDE 


因为 庚 3 入 一 0, 有 襄 恕 噩 ~ 一 宫 5858 故 得 


{Dy Ny 一 & + -1 _. 
Cov (8, I) = oN HT 
因为 容易 算得 六 B35 如 一 一 徊 ， 当 ij 再 利用 im mu/ 玉 一 


4 一 1 …，o0 即 得 当 玉 -cc 时 ， 


owxy— Cov (LP/o, 20Vc 风 一 一 Ny >a, 


(6.4.25 
3° 设 下 ,一 ( 开 w ns n=l1, 2, … 为 一 串 五 维 呈 机 向 


最, 若 对 任何 下 维 常 疝 量 四 有 瑟瑟- 一 > Ne ad4e)， 则 已 


一 >N (pA)， 这 是 概率 论 中 习 知 的 事实 、 
现在 考虑 任 一 常 向 量 一 (4 …, 如 4)' 而 令 Qr 一 Lx， 则 易 
见 Qu 为 由 Ax 和 


By= TS [a PIBP -号 NON—1D8 ny .BY 
NW dd 名 工人 Sw] t Nn 
- HtBy 


"i 


Tn 


所 构成 的 线性 置换 统计 量 ，fw 显然 满足 1° 中 的 要 求 , 因而 By 清 
足 条 件 WW， 叉 由 假定 ，4y 满足 条 件 瑟 故 由 定理 6.4.1，@w 经 
规则 化 后 依 分 布 收 敏 于 交 (0, 切 ， 出 2 知 Var(gn ->t4E 又 
刀 (Qw) ~=0, 故 有 Qs 一 >N(0, th 有， 当 下 ->co, 根据 3° 即 得 Lx 
一 > NW(0,， 4)， 寺 是 , 记 yw- (oww) (当主 时， owy 出 (6.4.25) 
给 出， 而 Tw = 1), 有 


LAsiLy -全 人 B N00, 


1 , NN MN 
注意 到 有 4=D- UU 其 中 帮 ~ding (家 壮志 0 )， 
一 人 关中 A 
U=( Ne 3 NW 了 得 
={D- UD 2- D+DUUDYd- CPO. 


其 中 -diog (证 而 


DV- 本 eg ed)) ， 


1_ 术 Dr-Er-TI- Fim/N n/N. 
Fy 


于 是 得 到 
也 .7 
= (N—1) 号 (D8) /Br + 一 二 (3 mI) /Su 


注意 到 由 Li? 之 定义 直接 得 到 次 mI 多 一 0, 因而 
m= mI 
由 上 式 得 
Ay Ls (一 TD 六 mASv > x 
由 这 个 极限 分 布 ,得 到 以 
3 mL) /Bn (oD / (NT—D (6.4.26) 


F650 


为 否定 域 的 大 样本 置换 检验 ， 若 用 证 1t， … 下 om 的 记号 代 避 ;| 
"5 fy 则 (6.4.26) 可 写 为 
BR- 高 m( 了 一 玉 )*/ 福 启 (Xs- 卫 )>() /NW-D), 
{6.4.27) 
不 难看 出 这 与 基于 己 统 计量 多 的 置换 检验 一 致 , 因 
ps 6. 
| 
NM- BR 
ei i-R 
是 旦 的 严 增 函数 .通常 的 水 平 a 的 也 检验 的 否定 域 
Fe nolo) . 


转化 为 
1 
Rr yr IF rv DP, -em). 
(6 .4.28) 
因为 当 太一 co 时 ， 
N—1 


ET EC Dy EC A (0 一 1) 1 Wolo) —> Xe 1 (0). 
知 当 帮 很 大 时 ， 两 否定 域名 .4.27) 和 个 .4.28) 斯 近 一 致 、 这 就 是 
说 , 从 大 样本 的 角度 看 , 即使 在 本 人 鲍 这 样 的 条 和 件 下 , 如 果 确 实施 行 
了 随机 化 ( 指 将 试验 单元 分 配 于 各 处 理 时 施行 了 随 视 化 )， 则 通常 
基于 正 态 假 商 的 书 检 验 仍 适用 . 

许多 方差 分 析 中 的 模型 在 试验 随机 化 的 假定 下 , 都 可 以 按 
本 例 的 方式 来 处 理 ， 因 此 ， 根 据 置换 检验 的 理论 ， 给 通常 基于 正 
态 、 等 方差 和 独立 性 假定 的 窒 验 理论 , 提供 了 一 种 新 的 且 较 为 自然 
的 根据 , 这 一 点 以 后 还 要 作 进 一 步 的 说 明 . 

下 一 例 不 需要 用 到 线性 置换 统计 中 的 极限 定理 、 它 也 是 置换 
检验 的 典型 岗子， 

例 6.4.8， 随 机 区 组 问题 ， 设 有 工种 肥料 , 要 比较 其 优 劣 . 使 


= E51 = 


rh ee ded he HE ie ri oa 并 nr 


用 个 包含 了 个 小 区 的 区 组 ， 在 不 施加 任何 肥料 时 , 第 了 区 组 的 
了 个 小 区 的 单位 面积 产量 依次 为 es， … an 假定 在 施加 第 种 
了 肥料 时 ， 单 位 面积 产量 提高 ， 不 论 其 施加 于 那 一 小 卖 ， 这 峙 零 
假设 豆 :“ 这 了 种 肥料 效果 一 样 " 归 结 为 “mi 一 … 一 &r、 在 瑟 成 立 
时 不 妨 就 设 诸 a 都 为 0. 

试验 采用 “随机 区 组 ”的 原则 安排 , 即 在 各 区 组 内 , 那个 小 区 分 
配 那 种 肥料 ,完全 由 随机 化 闫 证 , 而 在 不 同 区 组 内 , 这 种 随机 化 是 
独立 地 进行 的 ， 因此 ， 若 以 下 sy 记 第 了 区 组 中 施用 第 了 种 到 料 的 
那个 小 区 的 产量 , 则 在 五 碟 立 时 ， 瑟 1 …， 达 1 无 非 就 是 而 pp 
wr 的 某 一 置换 , 记 


二 站 
下 /== (yy 有 一 这 AT， 一 Wy 7, 


如 一 二 六 Ceg 一 0) (0 一 三 + 二 后 

简单 计算 得 出 

1, Wr 

(CE)) = }ty, VARCAE) = Sgrs), -| 1 

I: res 
故 车 记 了 了; 一 (Ys …， 了 7) 一 禄 (六 一 09), 考 虚 到 1，…，X 的 
独立 性 ， 有 BCFY=0,，VAR(CFD =520m) (or)， 取 卫 ,=*/ 
SmD， 知 百 ( 它 ) 一 0,， VAR( 人 一 (om), 与 n 无 关 ， 在 {aw} 上 施 
如 某 些 轻微 的 条 件 ， 使 用 多 维 中 心 极 恨 定理 ， 不 难 证 明 当 %>o% 
时 ， 人 ,二 > WO (gm))， 由 此 , 若 以 生 记 (om) 去 掉 最 后 一 行 一 
列 所 得 方 降 , 则 当 ”co 时， 

Ba0D Py 了 HP Pr 
不 难 验 证 4-:~ (om， 其 中 心 =3(T_DAT ar- G-DAT 当 
rs 于 是 ， 经 过 革 些 与 上 例 相仿 化 的 计算 (计算 中 用 到 芭 十 十 
=0 这 个 事实 ), 得 


- 上 区 站 
Sn) ~ Yi Xl. (6.4.29) 


车 采用 通常 方差 分 析 中 的 记 导 ， 以 及 1. 记 处 理 平均 ,6 一 4, …, 了 
区 组 平均 cy 以 所 记 ， 总 平均 用 至 .， 记 ， 贴 


Yi—n(X,.— ¥..), 8 一 子 寥 祝 CZe 一 三 09 
于 是 可 将 从 ,4.29) 写 为 
R=- 一 DY 名 (ZY) / 训 训 Cy 
Ye (6.4.80) 
利用 这 极限 关系 可 得 到 零 假 设 五 的 一 个 太 样 本 置换 检验 ; 当 RB 


好 (om 时 ， 否 定 互 注意 己 之 分 母 在 个 的 下 保持 不 变 . 利用 恒 
等 式 


- 究 立 (zw- 工 4 一 开 . 计 下 24m 宫 ( 了 一 并 .5 
可 将 吾 >> 失 与 为 等 价 形式 : 
pe 一 开 . 


= i 一 
{ 一 本 i= De 一 冲 十 亨 ..)? 
品 一 了 
> TD EL O， (了 .和 .31 
而 在 通常 正 态 假定 下 , 同一 零 假设 五 的 五 检 验 的 否定 域 为 
E> Fa. (0), (6.4.33) 
因为 
lim im 7 X 1 (0) 一 Hm 五 二 1 1) [A 


—— 7 2 (om ， 


得 知 在 ”很 大 时 , 两 个 检验 人 66.4.31) 和 (6.4.82) 是 渐 近 地 一 致 的 ， 
这 就 把 随机 区 组 试验 中 的 也 裕 验 理论 置 于 新 的 .更 自然 的 基础 
上 , 在 这 个 新 的 浊 法 下 , 随机 化 的 作用 是 一 目 了 然 的 , 而 在 通常 正 
态 模 型 


下 4 王 克 十 酌 十 至 十 eay ad 独立 ,ey~ 玉 (0, o 汶 
之 下 ， 不 能 理解 随机 化 逊 有 和 件 么 必要， 事实 上 ， 如 这 模型 严格 成 
立 , 随机 化 的 确 是 多 余 的 . 

本 人 铺 比 上 出 简单 之 处 在 于 有 关 统 刘 疆 的 渐 近 多 维 正 态 喜 接 用 
独立 和 的 级 限定 理 ( 中 心 极限 定理 ) 得 出 ， 而 不 需 乞 灵 于 线性 置换 
统计 若 的 浙 近 正六 性 ， 

例 6.4.4. 独立 性 的 秩 检 验 . 本 例 桔 质 上 兴 址 午 搞 检验 ， 但 
有 关 检 验 统计 量 的 新 近 正 态 性 易 由 定 现 6.4.3 证 得 , “因此 把 它 放 
在 这 里 . 

设 (o 了 六 = 二 训 ， 为 自 一 个 具 连 续 和 分 布 的 二 维 总 体 
中 抽出 的 id， 样 本 . 村 检验 如 与 了 的 独立 性 将 下 1 ，…， 互 w 
按 太 小 排列 为 于 由 二 … 志 oy， 以 Yn, 记 与 芋 w 相配 的 那个 了 
〈 即 又 op 一 至 ma)。 考 虑 和 统计 量 

， Ev-DiB, 
然后 注意 , 若 了, 了 之 间 有 较 强 的 正 相 关 , 则 (RB,，…，BRw) 到 G4， 
，…， 入 ) 或 与 之 相差 不 大 的 排列 的 机 会 大 ， 这 时 Ly 倾向 于 取 很 大 
的 值 . 反之 ,车 下 ,了 之 闯 有 较 强 的 负 相 关 ， 则 (RB,，-…，Rw) 取 
《mw 了 或 与 之 相差 不 大 的 排列 的 机 会 大 , 这 时 Ly 倾向 于 取 较 


小 之 值 ， 而 当政, 六 独立 时 ，(R。 …， BR) 以 同等 梳 率 入 | 取 (1 


之 任 一 置换 , 这 时 Ly 取 中 间 值 的 机 会 较 多 .这 个 分 析 给 出 
一 个 检验 独立 性 的 方法 ， 算出 x, 当 Ly 很 大 或 很 小 时 ,否定 独立 
性 假设 ,如果 要 在 访 有 限时 定 出 界限 , 要 算出 Ly 的 全 部 可 能 值 
当 襄 很 大 时 ， Zw 在 独立 性 假设 之 下 的 极限 分 布 易 由 定理 6.4.2 
定 志 ， 因为 Ex 基 由 4y 一 By 一 {1,…-, 入 } 构成 的 线性 置换 统计 
量 .很 容易 验证 ，{4xw， 召 *] 满足 条 件 MM， 改 定理 6.4.2 可 用 ,在 
独立 性 假设 成 立时 , 有 


BE(Ly) =N(N+ /4, VarlLy) = DE A+D 
从 而 得 到 


二 的 生生。 
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这 个 极限 关系 提供 以 


Lx -iNN+D’|> + YT ~vN-1,, 


[ zw- 到 六 GYA+D > NO, D. 


为 否定 域 的 大 样本 检验 .。 五 otelling 和 Pabst 在 1836 年 ( 见 dm 
Math, Statist. ,1986, p. 29) 讨论 了 用 秩 相 关 检 验 独 立 性 的 问题 . 


《五 ) 作 为 条 件 检验 的 置换 检验 


前 面 在 讨论 置换 检验 时 是 从 试验 设计 和 的 角度 去 考虑 的 ， 这 是 
一 个 有 实用 党 义 的 提 法 . 与 这 个 提 法 看 来 很 不 同 然 而 有 和 密切 联系 
的 一 种 考 碟 方 法 是 ， 把 置换 检验 作为 获得 相似 检验 的 一 种 手段. 
在 这 个 考虑 下 , 置换 检验 本 质 上 是 一 种 条 件 检验 , 

为 了 使 下 文 将 要 引进 的 较 抽 象 的 一 般 和 概念 容易 被 接受 ， 先 考 
虑 一 个 简单 的 例子 ， 设 区 1 …, 了 wm 和 证 mrb  wN 一 m8) 
分 别 是 从 具 连 续 分 布 了, G 的 总 体 中 抽出 的 i 设 . 样本 , 要 检验 假 
设 坟 : 了 (只 二 QCw)， 如 时 五 成立, 那么 不 论 将 芒 1,，，…， 共 wy 训 何 
置换 ;所 得 结果 《 芋 。…， 革 ) 总 与 原来 的 ( 耻 i, …, 好 x) 有 相同 
的 分 布 。 因此 ， 著 以 于 记 原样 本 点 (1 …， 茸 ) 而 以 OL) 记 
出 于 作 任 意 和 性 换 记 得 的 全 部 点 ( 当 节 1 …， 芝 xw 两 两 不 同时 ， 
(了 ) 有 入 !1 个 点 ,否则 点 数 将 少 于 入 由 .在 瑟 成 立 之 下 , O (了) 
中 每 个 点 在 给 定 CE) 之 下 有 同样 的 条 件 概率 ， 拿 本 问题 来 说 ， 
出 于 假定 了 连续 性 , 不 失 普遍 性 可 认为 CO 到 7 中 总 有 交 ! 个 点 , 因 


而 在 给 定 C(X) 时 ，C《( 工 ) 中 每 个 点 的 条 件 概率 为 -六 | (这 表明 


Z(X) 在 五 成立 之 下 为 一 充分 统计 量 )， 注 意 这 条 件 分 布 与 鼠 成 
立 下 总 体 分 布 的 形式 无 英 , 但 当 互 不 成 立时 , 则 这 条 件 分 布 一 般 


与 总 体 分 布 有 关 ， 且 各 点 的 条 件 概 率 不 必 是 再-， 这 个 差异 就 用 


来 检验 五 是 否 成 立 . 
因此 ， 所 设想 的 检验 过 程 是 ， 得 出 样本 (在 本 问题 中 为 


二 履 本 二 = 


EE 站 : 
人 


《XI 后， 找 凡 CCXY， 它 由 焰 六 作 任 
意 置 换 而 得 然后 注意 力 就 集中 到 CC) 上， 把 0O( 义 ) 用 适当 的 
方法 分 成 两 部 分 , 一 部 分 有 下 Ia 个 点 , 当真 实 样本 点 下 落 在 这 一 
部 分 内 时 ,就 否定 五 ， 这 时 ， 在 给 定 C(Z) 时 检验 的 条 件 水 平 总 
是 a, 因而 其 无 条 件 水 平 也 是 % 与 五 中 之 分 布 无 关 , 这 就 得 到 一 
个 相似 检验 ， 这 个 作法 显然 与 俩 6.4.1 中 所 讨论 的 两 样本 置换 检 
验 一 致 ， 俱 考虑 的 出 发 点 则 有 所 不 同 . 

在 上 述 考虑 中 , 本 质 的 一 点 是 ， (于 …', 这 四 的 全 部 置 搁 构 
成 一 个 有 限 群 好 ,而 :等 假设 五 成立” 与 “车 (天 4， …'， 区 小 的 分 
布 在 群 全 下 不 变 ”( 即 ， 对 任何 y&G,g 节 的 分 布 与 政 的 分 布 -…- 
致 ) 这 两 个 说 法 是 等 价 的 . 抓 住 了 这 一 点 就 立即 得 到 如 下 的 推广 . 

设 变量 王 的 样机 空间 为 (党 ;级 ,分 布 获 为 名 假设 及 是 ， 
“区 的 分 布 在 Go 内 ”其 中 24C 欠 人 根 定 有 一 个 有 限 群 G,， 每 个 
9E 妇 都 是 溉 到 名 上 的 一 对 一 的 可 测 变 换 ( 吕 4 和 和 sgdE 
wx) 。 假定 当 豆 成 立即 下 的 分 布 属于 G。 了 时，9 的 分 布 与 下 
同 , 对 任何 gEG， 对 任何 gx 所 到 ,考虑 集合 

OD) = {gr:ygE HQ}. 
显然 ,对 玫 ` 中 的 任意 两 个 点 , CO) OGD = 站 己 C(e) =0 0g 
Ca) 中 的 点 数 re 是 有 限 的 . 
一 个 检验 函数 中 (人 四, 清 足 条 件 


ODT (0<a<DT. (6.4.331 
别称 多 为 一 水 平 &“ 的 置换 检 验 . 这 关系 式 可 囊 为 
Buy[l$ (XY) IO(R)] 一 上 (6.4,34) 


如 yr 表示 条 件 均 值 是 在 吾 成 立 下 取 的 ， 这 个 形式 突出 地 表示 出 时 
换 校 验 的 条 件 检 验 性 质 ， 轩 人.4.34) 知 

BP) = Ert$ (XI) =a. 
这 说 明 水 平 < 的 置换 检验 必 为 水 平 & 的 相似 检验 .在 统计 重 
DOC) 为 i 的 (有 界 ) 完全 统计 量 的 场合 , 根据 定理 3.3.1, 任何 
相似 检验 必 为 置换 检验 . 


" HGS * 


-统计 量 C( 亚 ) 的 值 是 一 个 集合 因此 ， 这 个 统计 量 的 取 值 的 
空间 及 其 中 的 o- 域 ,公式 (6.4.34) 的 严 客 证 明 锻 ， 都 是 在 投 述 如 
换 理 论 的 基础 时 碰 到 的 问题 ， 下 面 的 定 答 解 决 了 这 种 问题 . 

定理 剖 . 和 8. 设 G 是 一 个 由 至 到 到 上 的 一 对 一 的 可 测 变换 
所 成 的 有 限 群 。 对 任何 YE 名 定义 口 G) 一 19239EGj， 以 关 记 
Co 中 的 点 数 ， 记 

Dn = Ui:re=mO (oz) 工 生 但 雪 者 ， 

型 是 群 吕 中 元 素 的 个 数 . 假定 对 任何 mw 存在 避 个 两 两 无 公共 
点 的 268, 可 测 集 8m，…， Smm 玛 |] Sm 一 Bm, 县 

OW) CSm=30 Ce) 站 Sm 恰好 包 食 一 个 点 ,一 二 mm， 则 于 
面 两 个 论断 等 价 ， 

1” 分 布 族 反对 如 不 变 ; 即 

FEPo, gyEGIP RE -TGRTEA NE 4AE Dy: 

2” Co 为 关于 分 布 族 Ps 的 充分 统计 最 , 且 

PrC41OC)) 一 4NOWw) 的 点 数 /r， 

这 里 O(w) 取 值 于 空间 多 一 002) :wE 洛 } 上 ， 其 中 定义 了 oo 域 
Be: BE Bo end (Ww) ES 

文 者 应 为 Ze 上 的 c~ 有 限 的 在 群 邓 下 不 变 的 测度 。 而 26 所 
此 6 在 群 全 下 不 变 ， 对 任何 了 了 EB, 记 闻 (人 一 47 (8) /dn， 则 
ff) 一 了 J")a. 8.(0) 对 任何 gEQ. 

这 个 定理 的 产 格 证 明 替 涉 一 些 细致 韵 论证, 在 此 从 略 了 . 

确定 置换 检验 可 以 从 功效 的 角度 去 考虑 ， 例如 , 若 涉 及 的 分 
布 都 对 一 不 变 测 度 吕 有 密度 《 见 上 上 定理)、 而 在 对 立 假 设 下 密度 
8 (的 为 已 知 ， 则 可 以 用 Neyman-Pearson 的 基本 引 理 , 对 每 个 <E 
当 定 出 Ds: 和 ds 0 所 志 1,， 并 到 

二 当 g(w)>D,, 
bEI = do BI = Ds, (ECR)). (6.4.35) 
0， 当 g(w) <D,, 

这 是 针对 这 一 个 对 立 假设 (密度 为 ytw)) 的 水 平 a 的 UMP 置换 检 


mT 


验 ， 这 个 作法 音 亿 意义 不 大 ， 因 为 一 般 来 说 对 立信 设 是 复合 的 ， 
并 不 是 只 包含 一 个 密度 g(o)， 

另 一 个 较 -和 的 作法 是 取 一 个 在 对 应 的 参数 检验 问题 中 有 基 
种 优越 性 的 检验 统计 量 sx)， 然 后 按 (6.4.35) 决定 置换 检验 
$(m) ,但 其 中 的 9 改 为 上 De di 的 选择 自然 是 按 使 (C.4.33》 成 立 
这 个 条 件 。 民 型 的 例 于 是， 一般 的 商 样 本 问题 在 参数 统计 中 对 应 
的 问题 是 检验 两 个 正 态 分 布 (方差 相同 ) 有 相同 均值 、 在 这 个 问题 
中 两 样本 :检验 有 一 定 的 优越 性 、 因 此 ,可 基于 两 样本 1 统计 量 
来 建立 置换 检验 ， 这 种 作法 是 着 服 于 扩大 问题 的 基础 ， 且 在 参数 
假设 成 立 的 情况 下 ， 使 检验 仍 保持 有 常见 检验 在 这 各 情况 下 的 优 
越 性 , 

当然 ,置换 检验 作为 一 种 构造 相似 检验 的 方法 , 主要 是 一 种 理 
论 性 的 东西 ， 因 为 要 真正 实现 这 一 点 ,必须 在 每 个 集 O(oy 上 算出 
tw) 之 值 , 并 按 大 小 次 序 排 烈 、 由 于 Oo 往往 是 一 个 包 食 极 大 量 
数目 的 点 的 集 , 要 实现 这 一 点 很 不 容易 。 置换 极限 定理 使 我 们 在 
样本 大 小 很 大 时 ,可 以 通过 极限 分 布 来 决定 检验 界限 。 但 这 样 一 
米 , 检验 就 丧失 了 相似 性 桓 转化 为 与 常见 的 参数 检验 一 致 的 东西 . 
我 们 举 几 个 例子 来 说 明 以 上 提 到 的 种 种 概念 

例 6.4.5( 两 衬 本 问题 和 多 样本 间 题 )， 设 五 a，*…， 卫 ww 为 取 
自 具 连 续 分 布 Co) 的 总 体 的 样本 , 6 一 1 …，o% 要 检验 假设 及 ; 
丙 (w 三 … 三 Jlw)， 关于 这 个 问题 的 置换 检验 (假定 作 一 NE 
(0 DD， $1 0 刘 一 坝 十 … 十 mw. 例 6.4.2 所 说 的 一 切 在 
此 全 适用 。 不 同 的 是 , 在 那里 我 们 假定 了 {aa， …， ax} 适合 条 件 
N, 在 这 里，{ci，…，qqj 相当 于 《ab …， 豆 oj， 而 后 者 并 不 是 
固定 的 数 ， 而 是 随机 样本 信 。 因 此 存在 一 个 它 是 否 满足 条 件 N 的 
问题 , 这 个 问题 将 在 下 一 段 讨论 . 

例 6.4.6( 独 立 性 检验 )、 设 (Xs 卫 ), 5 一， …, m 是 二 维 变 
量 ( 琶 , 了 ) 的 id， 样 本。 《区 ,了 ) 的 分 布 假定 是 属于 一 个 连续 分 
布 的 集合 ; 要 检验 了 与 独立， 


二 痢 再 各 ， 


浩 虚 变换 

UE FD, os, CX PoE{ CT Fe), 7 (Tn Pi)}, 
这 里 (全 ，…， 2 为 导 ，…, 0) 的 在 一 置换 ， 一 切 这 样 的 变换 构成 
一 个 包含 %1 个 变换 的 辜 、 显然, 若 蔷 与 了 独立 , 刚 上 述 恋 换 保 
持 Ta 工人， 《三 s， 了 上 的 分 布 不 变 。 这 样 一 来 ， 若 构造 基 
于 璋 本 相关 系数 


人 ZY REY 


3 Sr 2 
的 置换 检验 ， 则 考虑 到 7 的 分 本 与 mY 者 在 上 述 变 铬 群 下 不 变 ， 
7 的 置换 分 布 可 以 用 立 工 了 ,的 置换 分 布 来 代 蒋 , 这 等 于 
DB EY, 


的 分 布 , (Bu …， 妃 ) 以 概率 二 取 (，… 区 的 任 一 置换 ， 要 证 
衣 当 人 时 Ln 的 浙 近 正 态 性 ， 需要 证 明 {tA ys A), Ch 
站 } 满足 条 件 站， 这 个 癌 题 将 在 下 一 段 讨论 。 现 设 这 间 题 已 
解读 ,网 由 公式 1 人 6.4.12 与 (6.4.13)， 知 加 (7 一 7 二 了， 再 
Var( = CX) 
这 导 吾 以 
i= XT ny 1 
" 了 | 党 一 
[Ec ERP) | Yi 


为 和 否定 域 的 大 样本 置换 检验 ， 不 难 验证 ,这 与 正 态 假定 ( 即 在 二 维 
正夫 分布 六 (46, a3, 入 p) 中 检验 po 一 扩 下 的 ' 精确 检验 是 浙 
近 一 致 的 . 
例 6.4.7( 对 称 性 检验 )， 设 于 1,…, 互 。 是 从 一 个 具 一 维 连 
续 分 布 了 的 总 体 中 扫 出 的 ii， 样本 , 要 检验 假设 鼠 ;“ 巡 关于 原 
点 对 称 ”， 


= G59» 


考虑 变换 群 
《ED XY, Dm, 
其 中 忆 一 土 1，…, 向 一 土 1 这 构成 一 个 包含 个 变换 的 群 ， 昆 
然 , 当 吾 成 立时 , (于 1,，，…， 下 四 的 分 布 在 上 述 变 换 群 之 下 不 变 . 
考虑 基于 一 样本 1 检验 的 置换 检验 ， 由 于 一 样本 统计 量 | 


‘= Vi DT/ E) 


在 给 定 OCX) 一 太一 了 于 《一 至 ) :站 = 十 二 -站 一 寺 二 
之 下 ， 为 王 前 严 增 函 数 ， 这 相当 于 考虑 基于 瑟 ; 十 …… 十 工 , 的 性 
换 检 验 . 有 1 十 十 Xs 的 置换 分 布 即 为 本 = (一 人 4 玉 1 十 … 十 
(一 DD" 辽 ,的 分 布 ,其 中 后, …, 入 相互 独立 ， 在 下 :,，.…….， 廊 , (在 

了 ,中 它们 是 作为 常数 看 待 ) 满足 一 定 的 条 件 时 , 将 有 | 


TV/ 十 > NO, 1) 
(基体 讨论 见 下 一 段 )， 这 给 出 以 
局 > VE Hfy 


为 否定 域 的 大 样本 置换 检验 ， 不 难看 出 , 当 n 很 大 时 , 这 与 一 样本 
太 检 验 ( 它 用 来 检验 正 态 总 体 广 (a, o) 的 均值 < 一 0， 这 问题 中 此 
例 中 的 对 称 性 假设 在 正 态 总 体 之 下 的 形式 ) 是 浙 近 一 致 的 . 


《六 ) 随机 序列 满足 条 件 本 NW 的 问题 


定理 6.4.4 设 好 为 一 维 连 续 分 布 ， 其 方差 非 0 有限 ， 设 
衬 4 下 9 和 了 了 了， … 分 别 为 搞 自 其 分 布 卫 和 如 的 总 体 中 的 
iid, 样本 ， 记 
4 一 二 B ~ {Fy *, F,}, 
则 {4,，Bj， n=1，2,，…-， 记 概率 为 1 地 满足 条 件 对 . 
证 . 不 失 普 遍 性 可 设 六. 好 都 有 均值 筷 方差 1， 先 证 明 如 下 
的 事实 , 对 任何 5>>0， 以 概率 为 1 地 成 立 


im 上 兴 (ZX 一 年 )? -| _ wiaF (es), (6.4.,36) 


ne 并 | 一定 os 人 


人 


对 序列 { 寺 有 类 似 的 结果 (此 处 下 ,一 二 (下 :十 … 二 下))， 


事实 上 , 若 令 gf 一 091imcers 则 294) 存在 有 限 , 由 强大 数 
律 


Fd/ fa) | wdF(e), (6.4.37) 


以 概率 为 成立。 再 由 强大 数 律 , 路 ,~ 二 总 匀 c>0《a. 9.)。 于 是 
由 (6.4.37), 对 任 给 58>0, 以 概率 为 地 有 
f ,TdF (由 一 ln 工 袜 X? 


Hr 


<lim inf 二 部 EF 


+ 
名 了 市 1 村 t 一 下 o 二 从 


<lim 1 gup 二 之 在 


# 
1 ni 
<limL > XX} 


4 
nos 虹 TI 在 


se dm 
| Tw) " 


因为 当 840 时 ,上 式 景 两 端的 两 项 缘 以 | ，_oxdP (2) 为 极限 ， 这 
证 明了 以 概率 为 二 地 有 
,ee 
lm EE 全 Xt -ea (0), (6.4.38) 
同样 得 到 (以 概率 为 


lim 工 互 ,= odPig), (6.4.89) 


me 1 Tn [EJ 


， 1 
lm nm 3 afar 人 ” (6.4 40) 
而 下 ,一 0a. 8., 即 可 由 (6.4.38) 一 (6.4.40) 得 到 6.4.36)。 由 
(6.4.88) 可知 ,对 任 给 s 汪 0, 存在 5 忆 co, 使 以 概率 为 1 地 ,有 
lim 工 们 
Re 


(一 下 2<e， (6.4.41) 
及 


= BL 


腊 - 芋 (FY?) 


isl 
=n" 广 襄 i 
知 以 宏 率 为 土地 当 充分 大 时 ,有 碌 <<4m， 找 。 充 分 大 , 铬 以 慨 率 
为 1 地 , (6.3. 往 ) 以 及 


lim 二 3 (PF/— YY? (6.4.42) 
nes 山 tn 


都 满足 ， 我 ?6, 教 v So 之 0 ， 此 处 90 为 一 事先 给 定之 数 ， 
国 为 以 概 浊 为 工地 条 件 下 等 价 于 


j 1 . 一 -一 入 EE " Ty 3 一 
2 "3 Tpit Fos (人 
{86.4.48) 
但 为 了 使 | 〔 瑟 ,一 至 (Py— Fn) |>2V my 
当 中字 t 时 ，| 及 ;一 他,| 之 6 和 | 了 一 字 ,| 尖 6 二 者 至 少 必 居 其 一 ， 


二 而 ， 《6.4.41)， (6.4.49), 以 及 
lim 二 高 ( 开 一 站)a= lim pa 2. 8., 


Ha fl 


得 (以 慨 府 为 I 工 弛 当 % 充 分 大 有 时) 
1 < 元、 Dg 
me Pp i (KE Die 
i TP 
< 凰 2 IE Tm (Xs 加 会 人 
+ 车 训 (PY TX Td. 
1 Yn 咏 #1 


由 于 8 之 9 的 任意 性 , 知 (6.4.43) 以 硫 率 为 工地 成 立 ,， 这 征明 了 完 
理 6.4.4. 

考 虚 到 (二 ), 7”， 由 本 定理 立即 得 出 ， 

系 6.4.1. {4,= {A Wy 玉 n}} 以 概率 为 1 地 满足 条 性 右 . 

当然 ， 这 个 系 可 以 更 容易 地 直接 证 骨 ， 而 不必 求 哑 于 定理 
,和 .44, 

利用 本 定理 及 其 推论 , 立即 得 出 例 6.4.6 中 涉及 的 序列 , 必 上 以 


概率 为 工 满足 条 件 M， 又 在 例 6.4.5 的 多 样本 问题 , 在 豆 : 玉 = 
… 二 J。 成 立时 ， 必 以 概率 为 1 地 满足 条 件 N， 故 例 6.4.2 的 讨论 
以 概率 为 1 地 适 周 ， 下 面 的 定理 证 明 ， 即 使 在 豆 不 成 立时 , 序列 
(dx Ta 9 于 ai 是 ay …。 仍 以 概率 为 1 地 满足 
条 件 RN( 当然 , 在 全 -> 和 JuE (0, DD, i=1…, 6 的 条 件 下 .人 =m 
十 …… 二 mo 

定理 6.4.5. 设 下 4，…, 于 ,为 抽 自 连续 分 布下 中 的 iid. 
样本 ， 而 六 = 二 Aw={ 及 1 ny 下 mm 嘱 车 Hi 一 co 对 


% 一 1,…, 6, 而 每 个 了 的 方差 非 0 有 限 , {Ax} 必 以 福 率 为 工地 满 
是 条 件 芒 


证 ， 因 为 每 个 序列 {Xa,*…， 之 满足 条 件 交 (二 6.4,1)， 
帮 满 足 条 件 Ns( 以 概率 为 I, 下 同 ). 记 


1 他 加 1 o n 
w= 二 了 =- 方 衬 因 工 o 


有 
par(4)= 广 癌 六 (ze 玉 ) 
: 一 吝 习习 CE 3 tw pb )2， 
而 - 


Rw (AY) 一 max 3 min ue max| 六 jy 一 及 | 


amar| Xo yl mix iw Ts], 
各 个 max 的 范围 都 与 第 一 个 一 样 。 由 此 可 知 
ButA)/ VN on A) (A) 


i | 于 4 一 Xl /YE Fo)’ 


ein 


二 2 min 


i1ctee < 
由 每 个 序列 {全 a, …， 才 am 满嘴 条 件 对 知 上 式 右边 第 一 项 趋 于 0 


as 60" 


{ 当 每 个 wrr>co), 又 由 假定 , 每 个 mr>co， 知 上 式 右边 第 二 项 趋 于 
0， 这 证 明了 上 式 左 边 趋 于 0， 因 而 {4x} 往 足 条 件 No 由 满足 条 
件 区 。 定 吾 证 毕 . 


§6.5. 非 参数 检验 的 功效 


在 同样 的 水 平 之 下 , 两 个 检验 的 优 洛 比较 ,一 般 是 着 它们 在 对 
立 假 设 下 功效 的 大 小 而 定 . 本 节 考 虚 若 干涉 及 非 参 数 检验 的 比较 
问题 , 也 是 以 此 为 准则 .部 以 前 指出 的 , 当 样 本 大 小 固定 时 , 非 参 
数 检验 的 功效 的 精确 表达 式 往 往 无 法 求 得 ， 因 此 这 种 出 较 一 般 都 
十 建立 在 大 样本 的 基础 上 , 即 考 不 功效 的 极限 性 质 .。 除了 非 参数 
检验 之 间 的 比较 外 ， 一 个 受到 注意 的 问题 是 把 非 参 数 检验 与 相 垃 
的 最 优 参数 答 验 去 比较 . 一 个 在 前 面 提 到 过 的 例子 是 , 当 讨 论 针 对 
位 置 参数 不 同 的 两 样本 非 参 数 检 验 时 ， 检 验 两 个 正 态 分 布 是 否 有 
相同 均值 的 办 检验 , 常 作为 比较 的 对 象 . 总 的 说 来 ,理论 上 的 结果 
显示 出 , 在 大 样本 范围 内 , 对 比 往往 有 利于 非 参 数 检验 ， 但 是 , 由 
平一 方面 在 实际 间 题 中， 往往 样本 大 小 不 够 大 到 极 眼 还 论 能 适用 
的 地 步 , 加 上 历史 上 、 习 惯 寺 以 及 某 些 使 用 上 的 方便 的 考 虚 等, 这 
些 检 验 并 没有 能 取代 传统 的 正 态 理论 下 导出 的 那些 入 验 ， 也 应 当 
注意 . 非 参 数 检验 虽然 问题 提 法 的 基础 较 广 ,但 它 往往 也 是 针对 
一 定 的 对 立 假设 而 设计 的 ， 因 叱 , 检验 前 优 劣 的 出 较 , 很 随 决 于 所 
考虑 的 对 立 假 设 的 范 轩 , 这 些 以 后 我 们 都 将 从 实例 中 看 到 , 


(一 ) 置换 检验 的 大 祥 本 功效 


前 面 我 们 指出 过 ， 通 常 置换 检验 的 产生 ， 采 取 下 面 的 方式 居 
多 : 设 羡 的 分 布 族 为 多 考虑 检验 问题 吾 : 互 的 分 布 在 QE 内 . 
这 个 问题 月 某 种 相应 的 参数 形式 ， 在 这 个 形式 下 , 玉 的 分 布 族 局 
限于 双 o 仁 乡 ， 而 假设 吾 相应 地 成 为 “ZX 的 分 布 在 wa 内 ”mac 
2o，wazcCOm， 对 后 面 这 个 问题 ， 握 出 了 某 种 有 一 定 优越 性 的 入 
验 , 为 现 定 计 设 它 有 和 理 定 域 世 :#o) 关中， 而 秆 换 检验 就 建立 在 这 


s Gos 


个 统计 其 tx) 的 基础 上 .前面 所 举 的 两 样本 置换 -检验 ， 是 一 个 
典型 的 例子 ， 

在 参数 情况 下 提出 的 检验 itx), 有 表 确 的 对 立 假 设 or， 它 当 
然 应 该 是 煞 一 Qa 的 一 部 分 。 在 这 个 提 法 下 ， 我 们 感 兴趣 的 问题 
是 , 如 果 局 限于 在 对 立 候 设 wx 上 去 比较 ,由 tC2) 产 生 的 置换 检验 
的 表现 是 否 不 劣 于 原来 的 检验 i(z)。 如 果 这 个 回答 是 肯定 的 ， 则 
置 乒 检验 就 具有 一 个 吸引 人 的 性 质 ， 它 在 零 假 设 Bx (这 上 比 om 广 
得 多 ) 下 有 相似 性 , 且 在 参数 检验 的 分 布 族 内 , 仍 能 维持 (在 天 样本 
意义 下 ) 传统 的 最 优 参数 检验 的 翔 种 效率 . 下 面 我 们 以 寥 样 本 问 
题 为 例 作 一 仔细 的 讨论 , 然后 就 不 难 提出 一 般 性 前 结果 

发 及 4 …， 至 二 是 取 自 一 维 连 续 分 布 FP 中 的 iid. 样本 , j= 
二 … 6, 要 检验 息 设 

H:Fi (后 二 二 万 (的 
与 此 相应 的 一 个 参数 检验 问题 是 , 假定 丙 局 限于 正 态 分 布 NW (We 
太一 二， D 而 检验 假设 
五 ' :m= "Wo, 


关于 这 个 间 题 , 常用 " 所 检验 , 即 以 
.多 一 ——— 全- 5 mu 人 > > FP, we 0) 
7 rw- 3? 
为 否定 域 的 检验 ,有 一 些 最 优 性 质 、 我 们 把 这 个 检验 及 由 它 产 生 
的 置换 检验 分 别 记 为 和 dr，gB* 有 形式 
1， 当 办 (1 Dai 
pv) -| 


Ye 当 .多 (全 一 Da 
0， 当 .多 (ey 一 ou 
此 处 * 为 合 祥 本 (zt …， zono)， 器 (ww) 为 上 述 下 统计 量 . 之 值 ， 
cr To Te1T， 按 扩 有 条 性 功效 a 的 要 求 来 选择 ， 
全 6.4.5 总 结 了 上 节 对 这 个 问题 的 讨论 , 当 假 定 Fy, …', 也 
的 方差 非 G 有限 , 且 且 痢 一 NE (0 二 ,3 一 1 0H 时 (Nm 


+ 5 » 


十 po)， 以 概 窜 为 上 地 有 


Ce -0. {6.5.1) 


现在 我 们 要 在 形 如 ~ 六 (B50),， 1 8 的 对 立 假设 
处 来 比较 这 两 个 检验 外 与 让， 这 里 嫩 ,，…*， Bo 不 尽 相 辐 ， 为 此 我 
们 需要 注意 一 忻 事 。 如 果 让 如 ,5 国定 (而 不 全 相同 }， 那么 ， 
由 于 样本 太 小 无 眼 增 如 ， 两 检验 中 与 好 的 功效 都 趋向 于 I， 轩 此 
就 无 大 比较 ， 这 样 , 我 们 让 5 随访 而 盗 , 取 刀 二 wi/ MW 的 形式 ， 
=]， 0 人 不 人 多 相同 .这 虱 示 当真 很 大 时 ， 所 考 良 的 


对 立 假设 与 零 假设 很 捧 近 ， 接 近 的 数量 级 为 7- 
如 在 定理 5.3.1 中 证 明 的 ， 这 时 于 服从 自由 度 为 o- 工 和 
8 一 的 非 中 心 王 分 布 , 非 中 心 参数 为 
mm/ VN A/ VR) /o> HN) 
丝 处 CF = Nc 十 … + Motto. 这 说 明 : 当 太一 ce 时 加 的 分 布下 敏和 主 
到 并 ， 的 分 布 ， 又 
lim Fo yy ol0) = 21 (0). 
N+ 0 


由 此 推出 ， 在 所 提 到 的 那 一 品 对 空 假设 处 , 办 的 功效 收 人 证 于 
(xe (0 )。， 担 由 (6.5. 了 以 及 x2_1,s 的 分 布 的 连续 性 , 不 
难 知 道 ( 参 看 下 而 定理 6.5.1 的 证 明 ): 置换 检验 $8" 在 这 一 串 对 立 
假设 钼 的 功效 也 趋 于 同一 数 了 了 (x2 ,os 字 X10 )， 因 此 ， 当 样本 大 
小 太 很 大 时 , 在 正 态 对 立 假设 之 下 ， 检验 中 及 由 之 产生 的 置换 检 
验 四 在 功效 上 说 是 浙 近 一 致 的 . 

仔细 分 析 以 上 的 论证 订 以 看 出 ， 对 立 假设 为 正 坊 这 一 点 并 未 
起 任 司 特殊 的 作用 , 它 愉 用 来 推导 出 统计 量 .多 的 极限 分 布 (在 这 
一 串 对 立 假 设 下 ) 存在 , 县 .为 一 连续 分 布 . 最 后 证 明 两 检验 加 和 由 
有 同一 的 极限 功 殖 ， 只 依赖 于 统计 量 多 在 这 一 上 崇 对 立 假 设 下 的 


极限 分 布 存在 连续 这 一 点 ， 至 于 这 分 布 有 十 好 ,的 特殊 形状 这 一 
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点 并 没有 用 到 ， 因 此 , 可 以 看 到 ， 老 在 一 串 对 立 假设 {Pw} 之 下 统 
计量 多 的 分 布 函数 五 > 收 伍 于 一 连续 分 布 函数 五, 则 


lim B,(Py) =—lim Ba (Py) 一 一 豆 (王佐 从 小 


所 以 ， 在 很 宽广 的 范 转 内 ,检验 由 与 风 的 大 样本 功效 是 渐 近 一 至 
的 . 一 个 重要 特例 是 ; 

Py:FM = Fav RN), t=1,*,0. (6.5.2) 
其 中 玉 为 连续 分 布 函数 ,方差 非 0 有限, 而 mW，…，to 不 全 相同 ， 
电 中 心 极 眼 定理 不 难 证 明 ， 当 太一 co 时 ,统计 量 多 在 记 x 下 的 分 


布 仍 收敛 于 十 允 4 的 分 布 ,YY 一 总 hCa 一 辐 ?， 因 此， 在 对 立 候 


设 中 只 有 位 置 参数 不 同 的 情况 下 , 史 与 多 的 天 样本 荔 效 是 渐 近 一 
殖 的 .我 们 把 这 个 情况 下 的 仔 绍 讨论 和 留 给 读者 去 完成 . 
上 面 对 多 样本 问题 所 作 的 讨论 显然 地 推广 到 一 般 情 况 ， 设 
多 Go Dz, oz 等 记 导 保持 本 段 开始 处 所 给 的 意义 ， 对 检验 “ 革 
的 分 布 在 wm 内 ”有 一 个 检验 和 pw; 
li， 车 不 [人 >>Owas 
or -| ya 车 如 [ 定 ( 训 )] 一 Cai 
0， 车 [人 (MD] <Oyo. 
这 里 广 为 样本 大 小 , 及 (NN) 为 样本 ,ty 是 一 个 检验 统计 胡 . Co 
7Ywat0EYwe 忆 站 为 常数 ,选择 之 使 检验 有 选 定 的 水 平 s4， 合 上述 凶 
样本 检验 问题 来 说 , 让 一 得 十 十 mio 六 CN) = CEU 了 I 
oa po 了 mo) ;而 ty 为 了 统计 量 光 ， 
由 雪 产 生 的 置换 检验 只; 有 形式 


工 ， 若 ty [XN] > Tw [lO]; 
PrN)) Yro[ TN), 荐 tr LX CN) = TyolX ND]; 
0, 若 [人 CNY] <Twya[ 且 (NY], 


这 里 了 wa[ 及 CW)] 和 yxwal 肝 CN)] 选 定之 ,使 在 给 定 
PAA 
时 ,9s 的 条 件 功 效 等 于 wa， 在 此 全 为 在 置换 检验 问题 的 一 般 形 式 


"B67 = 


中 提 到 的 那个 变换 群 ( 见 $6.4 (五))， 又 注意 , 在 检验 直 中 出 
现 的 wa[ 这 (WD)] 与 YanLX CN)], 当然 都 具 依 叉 于 (CN)). 
以 Fytt 怀 (N)) 沁 在 得 到 样本 防 (N) 时 , ty 的 办 换 和 分布 的 
分 布 国 数 (当然 ， Fy(# 卫 ( 入 )) 其 实 具 依 束 于 OC 让 (WV)))。， 注 意 
在 国定 t+ 时， Fy (4 三 (为 一 随机 变量 . 
以 Fw(D 记 当 慎 () 的 分 布 在 ws 内 时 ， 加 [了 (NW)] 的 分 布 活 
数 ， 在 此 假定 了 这 个 分 布 与 王 (N) 的 分 布 在 ws 何 处 无关 ， 只 要 
它 在 wx 内 就 行 ， 在 前 面 讨论 的 多 样本 问题 中 ，ws 为 一 切 形 如 
LR) 1 6} 的 分 布 的 集 、， 这 时 统计 景 实 ( 即 此 
处 的 如 ) 服从 分 布 天 ww 因此 Pw( 旭 就 是 了 orn 的 分 布 活 
数 . 
在 作 了 这 些 描述 后 , 可 提出 下 而 的 一 般 定理 . 
定理 6.5.1(Hoeffding, 1952). 
1” 设 存在 非 几 滑 数 育 (加, 了 =1 一 有 唯一 解 (0<ia< 
),， 了 如 在 霹 外 连续 , 且 洁 古人 提 的 任何 连续 点 刀 骨 有 + 
tw KCN Sy POD, NS, (6.6.8) 
则 必 有 有 1 
Tya [KN ~ to (6.5.4) 
2” 设 {Pwj 汐 一 串 对 立 假 没 致 (6.5.3) 成 立 , 而 五 (全 为 非 降 
范 数 ,连续 了 于 扣 ， 使 友 - 王 (在 Ps 之 下 的 分 布 收 襄 于 瑟 ( 昌 ,好 
Pl ODI LH PI SAH, 当中 >oo， (6.5.5) 
对 二 的 任何 连续 点 韦 则 
lim Bas CP =1— H (to), (6.5.6) 


此 处 Bu 为 检验 由 的 功效 酚 数 . 
3 者 lim Ay(D = 了 (和 ) 对 下 的 任何 连续 点 成立 (Ft) 就 
是 1° 中 的 痢 个 玉 介 ), 且 (6.5. 闭 成 立 , 则 


1) 在 她.5.3) 和 (6.5.4) 中 未 明 指 互 (7 的 分 布 如 何 ， 这 表示 ， 未 论 何 时 ， 内 到 
6.5. 人 成 立 , (6.5, 和 9 必 成 立 . 
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lim Be (Py) =1— H(i), (6.6.7) 
Bi 为 四 s 的 功效 计数 . 
证 . 1° 任 绽 as>0, 找 C1, ty, 致 
在 aa 处 连续 ， 找 30 充分 


小 ， 缉 如 to 十 和 开交 ) 扫 皇 (aa) 一 S 然后 依 定 理 假定 ， 存 在 
入 (使 当 和 NN(8) 时 ， 


P{l F(a RN) — Fla [6, i=—1, 从 关上 一 全 
故 以 不 小 于 1 一 6 的 椰 率 同时 成 立 ， 
F(ay RN EP HD, Frlgs, HN PF (aD) 6, 


但 
Falas, EN) EP (la) tH Pt RN)) 
把 下 (人 ra] 送 人 ; 
Fi (wg, KN Pa) Bo (08s, KINYY 
> TL ON oy. 
困 此 当 克 兰 六 (9 时， 


P{lTwtR NI i |e > P{oa<Ty LR (NY So 
>P{ Fes ON Fa; < 2—1, 2} 1 一 6 
这 证 明了 (6.5. 扎 ， 
2 由 于 在 {Tk} 之 下 ( 即 : 焉 (WY) 之 分 布 为 Pn) (6.5. 介 成 立 ， 
由 1 和 二 .入 成立， 任 取 ?0 致 志士 9 为 吾 了 的 连续 点 , 则 
因 


lan PITsa(X (NW)) ol < PN) 一 了 
由 般 定 (6.6. 辐 太 夺 土 为 且 凡 的 连续 点 ,得 | 
Lim inf Ber, (Pr) > lim PTyalX (Nt +t) 
一 工 一 到 (各 十 仙 ， 
lim sup Bo (Py) <lim P (Pra[X (N)] > —) 
=1—H (Us—). 
由 于 声 为 五 (由 的 连续 点 , 令 %ny0 即 得 (6.5.8), 


» BHY 直 


a 


38。 由 假定 立 得 im COwo 一 如 ， 于 是 让 (6.5. 国 及 如 为 吾 的 的 
连续 点 ,直接 推出 (6.5.7)、 定 理 证 毕 . 


《二 ) 局 部 最 优 的 两 样本 秩 检验 


先 介绍 局 部 最 优 检验 的 概念 ， 设 了 的 分 布 族 为 {f(w, 6) 
Qj(w)}, 9 为 一 个 一 维 实 参数 。 考虑 检验 问题 吾 :6 一 oe>K :6>> 
gu 

除了 某 些 特殊 的 分 布 族 (例如 ， 单 调 似 然 比 族 ) 外 ， 此 问题 的 
UMP 检验 一 般 不 存在 ， 因 此 我 们 降低 要求 ; 要 求 找 一 个 水 平 a 的 
检验 和 在 很 靠近 9。 的 对 立 假设 处 功效 值 尽 可 能 大 ， 这 个 要 求 的 
确切 含义 包 食 在 下 面 的 定义 中 . 

定 当 肥 . 已 工 设 四 为 Hr 的 一 个 水 平 检验 , 若 对 瑟 <> 羽 
”的 任何 水 平 a 检 验 多 都 有 

Bz(0) <Be(9) +o(9 一 90)， 当 9>>bo 0 一 6o 充分 小 ， 
则 称 由 为 吾 <> 契 的 一 个 水 平 n 的 局 部 最 优 检验 ， 

如 果 密 度 了 w, 9) 具 有 这 样 的 性 质 ， 对 任何 检验 函数 内 其 功 

效 函 数 


RNO —| fs, Odp le) (6.5.8) 
机 在 积分 号 下 求 导数 , 则 羽 ( 全 存在 , 且 
Bs (0) -| ED gape). (6.6.9) 


这 时 显然 ,要 一 个 水 平 “ 检验 由 为 局 部 最 优 的 ,充分 必要 条 件 为 
Ag 记 瓜 (Bo)， 对 任何 水 平 a 检验 $， 根 据 Neyman-Pearson 基 
本 引 理 的 推广 (定理 3.3 .2) 及 表达 式 (6.5.8), (6.5.9), 得 出 局 部 
最 优 检验 史册 
1 当 f(y, 00) /Fs 00) > 有 
PAT —Y A BF, Bo) /Fr, Oo) 一 下 
0 当 F Ce, Bo) /Ff zs, Bo) =k. 
决定 ， 中 处 如 4 为 常数 ， 0 所 4<&1, 选择 之 使 Ba =a 又 


a TO 


F's, 0) 记 Bf tw, 内 /68 | oo0,. 

现在 我 们 把 所 引进 的 概念 用 于 两 样本 人 亲 题 ， 先 将 问题 作 一 确 
切 芍 措 述 , 假定 {了 (%, 六， 9 这 o} 为 一 个 一 维 连续 分 布 族 , 此 处 销 
数 了 五 和 后 都 假定 为 已 知 . 设 六 1，…， 下 mn 基 取 自卫 (8， bo) 的 iid， 
样本 ,而 了 …， 了 为 取 自 卫 tw, 从 中 的 i 雇 . 样本 , 对 某 个 0 如， 
在 这 个 特殊 拱 式 下 , 两 样本 间 题 归结 为 检验 8 = 的 30 2 

我 们 考虑 这 问题 的 基于 $6.3 的 那 种 两 样本 秩 次 统计 量 的 检 
验 ， 这 和 终于 以 x 一 (Zr …'， Zwy) 来 代 营 原样 本 (XI，…， 臣 mi 
m+n, 其 中 

Zs 和 营 合 检 本 中 第 个 最 小 的 为 工科 本 ， 
1， 著 合 样本 中 第 4 个 最 小 的 为 工 样本 . 
以 (ga pe 由 记 侍 pe 0 四 ,其 中 有 nn 个 1 个 0 显 
然 , 在 零 假设 93= 册 之 下 ,Zw 之 分 布 为 ， 取 ke …，&y) 之 任 一 排 
一 

列 的 概率 为 | 。 | (注意 不 同 排列 共有 ( 训 ) 个 } 

现在 来 考虑 (yi,，…，2Zww) 在 对 立 假设 下 的 分 布 ， 假 定 六， 
号 ;了 4 是 从 分 布 记 Cw, 六 中 抽出 来 的 . 为 了 使 计算 过 程 清楚 起 
见 , 我 们 考虑 一 个 如 一 3 n=2 的 特例 , 琅 盖 一 40, 1, 1, 0, 站, 来 
计算 Po((Zm …'， 名 55) 一 二 )， 就 是 说 在 合 镜 本 中 , 由 小 到 大 第 i， 
4, 互 号 是 互 样本 ,而 2、3 导 是 了 样本 , 这 个 事件 的 概率 

以 (2 二 2 二 2o 记 人 台 样 本 的 次 序 统计 量 ， 设 环 愤 ,人 押 有 
密度 (对 工 测度 ) f(%, 站, 则 易 见 在 给 定 21 ,Zs 时, (Zs 
ZZss) 一 所 的 条 件 概 率 为 

Pe{ (Zs aas) =A4|21, iy Zo} 
fA O00F CLs, OOF (Ea HOF Zs OoF (Zs, Ho) _ 
本 > FE OOF CE Bo FE OOF OE OOF CE 人 


1 
这 里 分 母 中 在 求 和 时 ， 每 一 项 的 和 全 是 十 2 3, 4, 5 中 除去 局， 
és 名 后 璋 下 来 的 那 商 个 ， 显 然 ,在 参数 为 中 时 (Za ，…，Gg) 的 密 
度 就 是 上 式 右边 的 分 母 张 以 3121( 在 有 1 过"…< 之 Zs 的 范 瑟 内 , 此 外 
为 人 .于 是 得 到 


"G7ie 


了 ta， Z55) = 0, 1, 1, 0, 0)} 
= fm 90F Go OF Gen OF (ea Go)f (ens 的 
31291. "sy. 
与 —1 : 
-( | | 51f (ms, Oo)F (sa, Oi) F (rs, 01) 
人 《ES 二 下 
了 《zs， Hof (2 fo dx, “0 Qs 
B+ 四 FZ En Fr 
-(2) Bol (F297) J), 
(Ga， Was Wa Has ts) 一 (0， 1, 1, 0, 号。 


完全 同样 的 推理 在 一 般 祝 况 下 给 出 ， 
一 t= N) 
NY a 
-人 BARE) 6.5.10) 
这 各 Za<… 开 2 为 合 样本 5。 …， 了 mw Ja …,Y。 的 次 序 统 
计量 ,机 (mi Ex 济 册 工 ， 0 组 成 的 一 个 序列 ,其 中 有 ww 个 1， 
me Nn 个 0. 


。 现在 假定 存在 s>0 及 万 零 测 集 及 使 当 zEB 时 好 的 纪 
在 册 所 9 < 加 +s 处 处 存在 , 县 存在 好 (oo) ,至 
Md, Fl, 全 < 加， | <), 


当 2E4， 则 对 表达 式 ©. 5,10) 路 加 检查 即 可 知 ,在 这 种 条 件 下 ， 
Ps 8 可 在 愉 .5.10) 右 边 的 积分 号 下 求 
得 .由 于 (im … za) 只 取 有 限 个 们 . 可 知 ， 任 何 秩 次 检验 , 缉 
基于 (Zwi, Zs) 的 检验 , 其 功效 函数 对 6 的 导数 存在 且 可 通 
过 在 积分 号 下 求 导 得 到 .由 于 了 om Zyxt, 一 天 为 一 常 
数 , 根据 前 面 提 到 的 局 部 最 优 检验 的 形式 得 到 : 了 水 得 忆 最 人 
的 两 祥 本 秩 次 检验 , 只 需 计算 
We (Zai 7, Zr ~ OP Zoi, 5 N) 80100, 

把 这 表达 式 起 过 某 个 界限 的 那些 tzwi，…, zyw) 列 在 否定 域 中 ， 显 


= BIS 


演 


Wa Cz51, *1", Zw) 


NT 1 Of(2,, 0 /90!,. 
-( Bl fn no]| 


N+ N 1 
_ ( ) ‘sy Bo [Olog f (Zs, 0) /80 160,] 


其 中 Sm— Bellog F(Z, D/O oo 二 下， 
总 钴 以 上 上 的 证 论 得 到 ， 
定理 6.5.2(Capon, 1961)。 在 前 述 记 号 和 假设 下 , 局 部 最 优 
的 秩 次 检验 沙包 以 下 公式 决定 : 
1, 车 高 owZm> 玉 ， 
ZZ 一 45， 若 amZm= EK, 


Nn 
0， 车 辫 gmZ rr 


这 里 扩 和 6, 00 所 1， 为 常数, 选择 之 售 检 验 的 真实 水 平流 a. 

应 当 注 意 的 是 ， 车 am 用 bam 十 6 代替 ,5>>0， 检 验 不 受 影 响 
“当然 , 其 中 的 常数 五 有 变化 ) . 

例 6.5.1， 设 四 4， -7， 六 mw 和 了 4， 了 ,分别 为 取 自 正 楚 分 
布 妇 (a, 0 和 六 中, ao 中 的 ii. 样本 、 要 检验 

b=0Oh a, 

由 于 把 诸 二 :和 了 工作 同一 线性 变换 下: 一 人 十 页 jj 一 41， …，， 
mg =1， 0 不 影响 五 和 了 等 在 合 梯 
本 中 的 稚 次 ， 不 失 普 遍 性 可 没 翌 1，…， 王 mw 和 了 ，…， 了 分 别 来 
自 Ag DDD 入 (8, 了 ,98>0， 这 样 问 题 完全 具有 本 段 所 论 的 形 
式 . 且 

1 _ 于 1 a 
og or 0) = — 108 (2m) 一 于 名 一 分 ; 
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而 810g fw 外 /861s-o 一 2， 于 是 


am—= E20), t=1, pp， 
其 中 1 之 … < 之 Zw 为 取 自 下 (0, 1) 的 iia. 样本 ， 因 此 , 所 得 出 的 局 
部 最 优 秩 检验 就 是 Fisher-Yates 检验 . 
例 6.5.2. 设 


(的 = 寺 一 朋 十 302， 0<2<1，0<9<1， 如 =0， 
则 810g 了 {zw, 的 /89|s-o 二 一 1 二 2x, 故 
Cam = 1+2by, bu=B(2) a/ N+D), i=l, ,WN, 
这 里 久之 之 25 为 自 玉 0, 力 中 抽 骨 的 天 小 为 去 的 次 序 样 本 ， 
因此 , 对 上 述 分 布 族 而 言 , 局 部 最 优 秩 次 检验 就 是 Wilcoxon 秩 和 
检验 . 


(三 ) 检 恰 的 相对 渐 近 效率 (Relative Asymptotiec Efficienoy, 
简 记 为 A&BRED) 

本 段 考 蕊 两 个 检验 的 比较 问题 ， 间 题 的 确切 提 法 如 下 . 设 变 
晤 的 分 布 族 为 细 要 检验 假设 上 perkx， 这 里 QmrC 区 Or 一 荐 一 
or， 设 闫 于 这 个 问题 有 两 个 检验 $ 和 卫 ， 一 般 , 由 于 8x 和 x 的 
范围 很 广泛 ， 在 这 么 广泛 的 范围 办， 启 和 了 中 的 一 个 全 面 地 优 于 
另 一 个 的 情况 少见 、 因此 , 我 们 从 其 中 抽出 种 种 包含 一 个 实 参 数 
日 的 子 族 {Ps, 全 加 }, 假定 当 = 同时 ，Ps 在 Dr 内 ,而 当 0 
时 , Po 在 Qx 内 .我 们 在 这 样 一 个 子 族 中 来 比较 这 两 个 检验 ,了 
的 优 步 ， 由 于 检验 一 般 都 有 相合 性 , 如 果 我 们 固定 一 个 8>>B。, 则 
当 样 本 大 小 真一 ce 时 ， 这 两 个 检验 的 功效 都 趋 于 i， 因而 无 从 比 
较 ， 所 以 , 我 们 要 取 一 串 名 >>0， 并 以 某 种 速度 趋 于 0, 将 两 个 检 
验 在 这 一 串 对 立 假设 上 的 功效 来 进行 比较 ， 

设 分 别 以 Ba y 和 Bzr,x 记 样 本 大 小 为 时 , 检验 号 和 了 的 功 
效 函 数 ， 取 一 上 巾 8 一 0 6xy 记 0， 设 ON) 和 Oak 为 站 的 两 个 
整数 函数 , 臻 

lim Bs on (by) = Br can (Or) =7, 0O<Y<1,. (6.5.11) 


+ 74 * 


则 可 以 说 : 近似 地 看 , 用 检验 5 而 抽样 CC 和 次 的 效果 ,大 体 + 等 
于 用 检验 了 而 抽样 CaCY) 次 的 效果 ,因此 , 比 信 Oa)YC1(N) 的 
极限 ， 妇 果 与 ? 无关, 意 即 , 对 任何 0<y<<1, 著 O44) 和 Cs(N) 
满足 (6.3.112)， 则 lim Ca(N) /01HN) 就 存在 目 等 手 一 个 与 ? 姑 关 


的 数 ， 则 这 个 数 可 以 衡量 检验 态 对 工 的 相对 优 直 性 , 它 称 为 仿 对 
好 的 相对 浇 近 效率 (ARF), 并 记 为 et5/77)， 
?53/7) = ln {CaN) /ON)]. 


当然 , 6CS/TD 与 所 选 出 的 分 布 几 {Ps 9 加] 有 关 ，AARE 可 粗略 
地 理解 为 ; 车 (比方 说 }etS/T) ~2, 则 用 检验 了 需要 比 用 检验 上 旺 多 
一 倍 的 抽样 ,才能 达到 大 致 一 样 的 功效 . 

计 上 急 述 的 概念 是 Pitman 在 1948 年 引进 和 的， 故常 称 为 
Pitman 相对 渐 近 效率 ， 除 此 忆 外 ,其 他 作者 还 引进 了 另 一 些 类 似 
的 概念 . 

六 RB 的 计算 基于 下 而 的 引 理 . 

引 理 6.5.1. 在 上 述 记 导 和 下, 假定 

1° rt 一刀 Dacl, 给 定 )， 

2 存在 着 定义 于 [pw 十 es) 的 冰 数 jw (和 xf 的 > 小 致 

和 -二 Wi0, 1)， 


一 致 地 于 196, 如 十 8) 内， 这 里 了 sy 的 意义 是 : 当 样 本 大 小 为 站 (这 
于 样本 记 为 吾 (7 时 ,检验 了 有 形式 
1， 当 Ty (FN)) hy 
TCX ~ yw BS Ty (HN)) = Nye 
10， 当 Ty( ND < hye. 
入 假定 jx (外 ,ow (09) 都 在 [9。, Go 十 8 有 有 浪 导数 , 且 At 
>0, 
各 设 B 一 抽 十 上 /NBN 上 >0, 而 
， 8 
lim -~ 


又 在 如 所 8 所 By 内 , 当 帮 一 co 时 , 一致 地 有 


* BT 


HimCY-o Cg)yow(go]=o 0U<o< cc， 
则 
lim Bar, wv Oy) =1— 人 十 (2 ~ ko), (6.5.12) 
全 为 六 (0, 了 n) 和 的 分 布 疯 数 . 2 田 押 (94) 一 1 一 a 决定 ， 
证 .由 于 
Br, x (Ow) = Po lly Nyal 
P | Ty— py (O70) -> 入 ve Hw (yy) | 


Gy ayn) 
于 是 , 根据 假定 2 中 提 到 的 一 致 收获 性 , (6 .58.19 的 主 明 归 绪 为 
lm Me bs, — ke. (6.5.18) 
Nm ty) 


将 证 此 式 , 根据 候 定 8 ,将 pow 朱 在 如 处 作 Taylor 展开 ,有 


pow (Ow) = pon C00) + - 多 (的 )，2 二 的 二 的 


Ma ti Oy) — Nua pn (bo) EN-va te) (8.5.14) 
Oy (Hw) 


Uw {Dy) CN (Bx) 
由 假定 1°，2*, 4°, 知 (6.5.14) 右边 第 一 项 趋 于 zo， 当 ->co, 此 
因由 1,，2° 有 yo 一 poy (60)) /ow(Bo) 一 zo， 丽 由 47， 知 ow (Ow)/ 
ow (90 一 >L， 叉 由 4°, 注意 名 所 供 志 0 
Np (8) /ow (Bn) 
= [Np (Ow) /on (00)]: [on CO0) /oy (Ox) j—0, 
当 太一 ceo。 于 是 , 在 {6.5.1 人 两 边 令 和 一 oo, 即 得 (6.5.13)， 引 
理 证 毕 . 
现在 假定 检验 和 允 者 满足 本 引 理 的 要 求 , 且 设 引 理 的 条 件 
3° 中 的 值 , 对 总 和 四 分 别 为 上 和 mm、 任 取 抽 >0， 决定 >>0， 
致 
Kk161 一 Ko0s, {6.5.15) 
记 br 一 名 二 ia/ 下. 抽 OCN), 致 如 /VOOD 一 /ME、 若 令 
Gy ~ 外 十 局 /到 则 Oy 一 9y， 于 是 由 引 理 6.5.1 有 


» 756. 


IE PEE rr 


Bsr BR) ?| — (kd), 
Br, cty) (On) = Br, wv (Bren) —>1— (£09) 
一 ] 一 号 [gs — ks61) 。 
8 = lim [CO CN /AN), 
把 果 右 端的 家 限 春 在 ， 介 由 /MOO = 上 /VR 及 (6.5.15)， 
得 
egS yy) =E Bi —07/02 
再 出 引 理 的 条 伯 4” 得 


r {人 》 Hs Sy (80) 3 
7 1 OT 0 .. 8 .5.168 
95/T) = -lim| awito) TAO) ] ” ( ) 


不 难 知 道 
8118 el TY /el(Ba/T). (6.5.17) 
办 此, 如果 求 得 了 任 一 检验 相对 于 某 一 .标准 检验 前 ARE,， 则 尾 两 
检验 的 入 及 卫 可 求 出 . 
例 6.5.3. 〈 关 于 位 置 参 数 的 两 样本 秩 次 检验 的 和 REB)，、 设 
和 和 别 为 取 自 连续 分 布下 和 介 中 的 i 让. 


术 本 , 入 一 m+n, 语 Yh 0<X<IT 考 碟 一 族 只 有 位 置 参 数 不 同 


的 对 立 假设 , 好 鼠 () 二 下 (2 二 从, 96>0， 在 这 个 族 中 , 两样 本 问题 
成 为 8=0e>9>>0. 假定 了 (对 工 测度 ) 有 密度 了 

以 Tw 记 §6.3 (二 ) 中 雇 描 述 的 西 样本 秩 次 统计 量 ， 考 虚 以 
{Tw 这 hwa} 为 否定 域 的 检验 了， 设 定理 6.3.1 中 的 一 切 条 件 都 满 
是 ?, 贴 由 该 定理 ,有 


Ty— — wt) 
fy 


> No, 1), 
其 中 

分 注意 , 由 定理 6.8. 生 条 件 "Xw 一 和 图 定 "可 以 用 “各 wh 0<4<12 代 矢 ， 且 在 
此 处 的 位 置 参 数 入 况 , 收 黎 子 正 态 分 布 有 一 致 性 ， 


"HTT * 


pO = Tm Ps) + F(t]dr (os), (6.5.18) 
且 当 >0 时 ,有 
Him No$ (Ox) ~- A’, (8.5,19) 
其 中 4 | T°)aw— ({ 7 nas) . 
对 引 理 6.5.1 的 四 个 条 件 而 言 ， 条件 I?、 2° 与 4° 的 前 半 最 
然 成 立 。 条 件 4° 的 后 举 及 条 人 忻 3 ， 取 次 于 prt 久 可 在 积分 号 下 
求 导 : 
ps -| [回忆 GD +r tO] eto de, 
(6.5.20) 
且 当 tr 一 0 时 ,王将 极限 号 移入 积分 导 下 : 
lim jb 由 一 | GATEP I sade. (6.5.21) 
另外 , 考虑 本 问题 的 两 样本 -检验 2*， 它 基于 统计 量 
二 Tiz 二 ”下 工 1 二 | ee | 
人 -VC 
否定 域 为 Th 这 Eyal ，。 由 于 当 入 -xo0 时 , 323 的 分 母 依 概率 收 
钙 于 分 布 也 的 方差 03， 知 


(ry /oN 1), 
上 且 对 有 界 的 8 这 个 收 敏 显然 是 一 致 的 , 因此 
OD Ny 册 of 的 =afe 为 常数 )， 
对 此 , 引 理 6.5.1 的 条 件 显 然 成 立 ， 于 是 由 公式 (6.5,16) 得 
e( 秩 检验 /t 检验 )=e (T/T 一 oa 防 /4? (6.5.22) 
其 中 c?，42 的 意义 已 如 前 述 , 而 
sz-([. T'IF OO) IF (odw) . (6.5.28) 
上 面 的 推导 到 决 于 (6.5.20) 与 (6.5.21) 的 成 立 ， 使 用 控制 收 
仇 定 理 不 难 验证 , 下 面 两 组 条 忻 都 是 充分 的 


TB 


1 (四 有 界 , 下 (的 有 界 且 几乎 处 处 连续 (注意 了 名 ) 的 几乎 
处 处 连续 性 已 包括 在 定理 6.3.1 的 假定 中 )， 铺 如 ， 在 了 (zy 一 4 
《Wileoxon 检验 ) 及 了 为 站 0， 了 的 密 产 时 . 

2° 存在 及 >0, 致 

sup IJ' LF (oto]|<Ki(e), sup lf (e+ |<K, (w), 


而 [Kio) Fs)f Co) dv<o0, 
例如 , 当 J (2 一 古 (ww) (Fiaher-Yates 检验 ), 而 了 为 术 (0, 由 的 密 
度 时 . 
加 到 公式 (6.5.22)， 因 为 当 用 二 了 (名 人 RF) AP/T") 
之 值 不 变 (此 粘 分 别 汐 密度 了 的 均 信 和 和 方差)， 故 不 失 普 湿 
性 可 设 
全 erao-o [sa | fal. (6.5.24) 
这 时 , 对 Wilcozxon 检验 (其 中 (wm) 一 0, 将 得 
a (TPIT) -12|~. fr (w) dw. {6.6.25) 
在 (6.5.24) 的 约束 下 ,， (6.5.25) 可 有 取 任意 大 的 值 , 这 说 明 , 对 位 置 
参数 族 而 言 ，Wilooxon 检验 相对 于 太 检 验 ， 基 效率 可 高 出 许 包 
人 悦 。， 特别 有 超 的 是 ， 在 约束 必 .5.2) 之 下 ，(6.5.25} 有 一 个 下 界 
0.864、 这 就 是 说 ， 即 使 在 最 不 利 的 情况 下 ， 玉 Wileoxon 检验 的 效 
率 想 对 于 太 检 验 而 言 ,也 不 过 低 百 分 之 十 几 。 因 此 ,在 样本 大 小 足 
驶 大 时 , 使 用 非 参 数 检 验 来 代替 和 传统 的 参数 检验 是 可 取 的 . 
为 了 证 明 碎 上 美 于 (6.5,26) 的 下 界 的 论断 , 考虑 


END-{ FG -Ba MF Cw) de, 


作 方程 2 2 (2 一 四 一 
由 于 了 必须 非 负 ,， 解 为 


五 (一 的 )，| 光 | a 


和 


约束 条 件 (6.5.24) 给 出 a~ ,6~ 二 W5、 这 时 
12| [~ Pdo] 108/125 -0.864 
这 焉 明了 上 述 竺 果 .， 这 个 结果 是 Hodges 和 Lehmann 在 1966 年 
证 明 芍 ( 见 Anm. Math. Statist,, 1958, p. 824) ， 
对 Fisher-Yates 检验 ,有 J(w) 一 于 (2) 此 处 及 以 下 以 pt{%) 
和 溃 (2) 记 六, 二 的 密度 和 分 布 函 数 , 而 省 1(w) 为 外 的 上 反 奖 数 . 
出 于 | 
1 下 | 
4 | Pd [| 7 de) 


一 三 wap fa 一 (| op (Cw) dv) = 1, 
得 ， 
年 ， fF 
(PTY ~ (全 jo rT dz) .6.5.26) 
这 里 了 ,7T™ 分 别 为 Tisaher-Yates 检验 舟 扩 检验 , 丈 和 了 分 别 为 所 
考 感 的 位 置 参数 族 指 分 布 与 密度 函数 . 
Dhernof 和 Bavage 在 1968 年 Cdnn, Math. Ntatist., 1968, p. 
B72) 指出 
em pl, (8.65.27). 
对 任何 刀 ， 且 等 导 当 得 仅 当 部 为 正 态 分 布 时 达到 ， Gastwirth 和 
Weltf 在 1968 年 ( 见 Anm、 Math. 9iatist., 1968, p. 2128) 给 了 一 
个 较 简 单 且 严 烙 犁 证 明 , 如 下 ; 
设 随 机 变量 了 >0，、 则 依 Jessen 不 等 式 ( 引 理 2.1.2), 有 有 
ly、 1 
(多)> 鱼 YY 
等 导 具 在 了 以 慨 率 为 1 等 于 一 常数 时 达到， 将 此 不 等 式 用 于 
> fw) -1 
r~ {sr} 
I Fw) ™ -1 3 
nd pt CF (2))Jas) 
: (6.5.28) 


有 


时 BO 


考察 积分 "= | pop Co)) de, 
”用 分 部 积分 得 
=p[O P| ”十 | otP (of (ods, (6.5.29) 


在 此 应用 了 关系 式 
pI FD) /dr -下 [FC8) fF to). 
(6.5,29) 右边 第 一 项 为 0, 此 因由 


,1 一 (ry 
lin 
知 ， 签证 im spIG-*(P(o)] = 0， 只 需 证 
lim zG-[P(o] [1— Fe)} 一 0. (6.5.80) 


在 例 6.3.1 中 ,已 证 当 or->co 时 ， 
DIF WI < I(log 二 Fy) < [1 Fw) 1- 
改 铭 证 (6.5.30), 只 需 证 明 lim wf 一 了 Cw)] ~0， 但 由 分 布 万 的 
方差 有 限 , 可知 妆 2->oo 时 ， 
Po war -0 
这 证 明了 (6.5.30), 因而 lim wsp[G-+(P(w))] =0， 同 样 的 方法 证 
明 limwp[~!1(F(s))] 0, 因而 
lm olim {wb [Fo)]f (as 


-| old1(F C0) yds> 0. (6.5.81) 
故 当 % 充 分 大 时 有 的 0， 由 Sehwars 不 等 式 ， 
(Fa 
= ( " oF BLF C0) VFS az) 
< sf ar] BR) ds (6.5.39) 


= B81- 


注意 到 [21f (gdz=l 由 此 式 及 (6.5.31) 得 
(pte) < re 60) as 
~ 上 POP = | -0) ay 


一 [vp Way=1, 


忆 此 代入 6.5.28) 即 得 7>1， 从 而 证 明了 (6.5.27). 上 且 Bohwarz 
不 锋 式 中 等 续 成 立 的 条 件 可 知 , 要 (6.5.32) 中 的 等 号 成 立 , 必须 w 
与 钙 全 [F(w)] 成 比例 , 虽 ~[p)] 一 04 或 F(z2) 一 (Cam). 由 蔬 
的 方差 为 寺 知 #=1, 即 政 必 为 本 (O, 的 分 布 二 . 

所 以 , 对 只 有 位 置 参 数 不 同 的 对 立 人 很 设 而 言 , 用 Fisher-Yateg 
检验 的 天 样本 效 字 在 任何 情况 下 都 不 低 于 #- 答 验 ， 只 在 分 布 确 为 
正 态 { 这 时 如 所 周知 , 失控 验 有 沫 种 最 优 人 性) 时 ,二 者 才 相 同 . 

然而 , 我 们 寿 意 在 此 重复 提 到 下 面 的 事实 : 尽 篇 这 些 非 参数 检 
验 有 上 述 吸 引入 的 大 样本 性 质 ， 到 目前 为 止 传 统 的 正 态 候 定 下 导 
出 的 检验 的 地 位 并 未 动摇 . 我 们 以 前 指出 过 ,这 除了 历史 上 和 习 
惯 上 的 原因 让， 还 由 于 对 非 参数 检验 的 小 样本 功效 知道 其 少 ， 现 
在 我 们 还 可 以 提出 一 点 理由 ， 就 是 只 有 在 对 于 对 立 假设 的 状况 有 
较 确 切 了 解 时 ， 才 部 保证 指 选 的 非 参 数 和 检验 优 干 传统 的 正 态 假定 
下 的 检验 ， 例如 ,此 处 论证 的 Wilcozon 和 Fisher-Yates 检验 之 
忧 于 太 检 验 ， 依 束 于 对 立 假设 确 只 有 一 个 位 置 参 数 的 差别 这 个 事 
实 ， 比方 说 《 行 细 计算 留 纵 读者 作为 一 个 练习 )， 当 对 立 假 设 有 
红 一 办 户 () 十 6 的 形状 <8 志 耻 ， 即 及 1，…， 玉 wm 是 从 分 布 
五 中 抽出 ， 而 了 ，…， 了 是 愉 分 布 己 一 凡 了 人 十 全 中 搞 上 出 
《玉手 GY 时 , 不 难 算 出 

6 Wilooxon 检验 /检验 ) 


.e-em)are 
=120}| 一 = ， 全 .5.33) 
人 人 四 -GD))az 


+ 82» 


对 不 风 的 豆 ,， 纺 “可 以 取 夕 大 的 亿 ， 也 可 以 取 很 接近 于 0 的 值 ) 
(o 为 分 布 了 F 的 方差 ), 基 此 , 对 这 一 族 对 立 假设 而 言 , 就 没有 理由 
认为 Wilooxon 检验 在 大 样本 情况 下 一 定 优 于 壤 检 验 了 . 

例 6.5,4( 符 号 粒 验 的 ARBE)， 设 了 1,，…， 是 取 自 连续 分 
布 了 中 的 记 . 样本 ,要 检验 假设 

五 : 分 布 五 关于 诛 点 对 称 . 

取 一 族 分 布 {了 (2 一 四 dw, 9 之 0}j， 这 里 (zw) 是 一 个 关于 原点 对 黎 
的 密度 函数 ,其 方差 中 非 0 有 限 . 

所 谓 符 号 检验 (Sign Test) 5 是 这 样 一 个 检验 ， 以 5 记 王 t 

， 世 ,中 大 于 日 的 个 数 , 当 Sn 过 >hm 时 否定 党 假设 五 (在 此 为 2 一 
oy 因为 5。 的 分 布 为 二 项 分 布 Btn, a( 闪 ), 其 中 


ab) ~ 亩 + /Dam 
知 引 理 6.5.1 的 条 件 全 部 适合 , 且 
jon) ~ H+ | f (ad), 


oO -oF (| far) ). 
在 传统 的 正 态 假设 下 , 采用 的 检验 是 以 


T= VR /VT Xi 0) 
为 否定 域 的 一 样本 术 检 验 , 用 检验 记 为 荆 易 见 
(PVE DN/ E> NNO, 1), 
且 收 襄 是 一 致 的 .这 相当 于 
HR 人 (的 一 wm ol, (0 =o}. 
因此 由 公式 (8,6.1 合 得 出 
oC8/T) ~-48°(0)o7. (6.5.84) 
当 了 (2) 为 太 (0, 了 DD 的 分 布 隙 数 时 ,此 值 汶 23/xw、 不 难看 出 : 对 不 同 
的 了 a(S/D) 可 取 任 意 大 的 值 . 
例 6.5.5《 关 于 位 置 参数 的 多 样本 秩 次 检验 的 AREI， 关 于 
在 RE 的 公式 公 .5.17) 依赖 于 引 理 6.5.1, 其 中 和 假定 了 检验 统计 量 
s B86 se 


是 渐 近 正 态 的 ， 然 而 ， 就 ARE 这 个 概念 的 本 质 而 言 , 它 不 过 表示 
两 个 检验 在 达到 同等 功效 时 记 需 样本 大 个 的 比较 ， 因此 ,在 决定 
AR 了 时 检验 统计 量 的 浙 近 自 态 性 并 非 必 和 需 的 。 如 果 检 验 统 计量 
有 其 它 某 种 极限 分 布 ， 导 致 公式 4.5.17) 的 那 种 推理 的 思想 仍 完 
全 适用 , 从 而 可 以 得 出 s087/ 2 的 相 庶 的 表达 式 . 不 作 这 种 一 般 的 
形式 排 导 , 我 们 以 窗 样 本 问题 为 例 来 说 明了 面 所 谈 加 的 想法 . 

设 下 ,下 是 取 自 连续 分 布 天 中 的 iia. 样 本， 上 
二 hE (0,， 417, 名 二 41,，…, 0, 考 虚 -- 旋 
这 样 的 分 布 : | 

Fm) 一 到 (二 的) 一 ,6 
下 对 工 测 度 有 和 密度 了 (2%)， 在 这 个 族 中 , 多 样本 假设 归结 为 及 : 抽 
= 

考虑 在 8$6.8 万) 中 讨论 的 那 种 秩 次 检验 。 这 种 检验 是 基于 
引 理 6.3.8. 为 了 计算 这 种 检验 相对 于 其 它 检验 的 ARE， 需 要 算 
出 它 在 一 定 的 对 立 息 设 下 的 渐 近 功效 ， 面 为 此 又 必须 算出 由 
(6.3.76) 式 左 边 那 种 检验 统计 量 (我 们 将 这 检验 统计 蕴 记 为 Ss， 
相应 的 检验 记 为 仿 在 一 定 对 空 假设 下 的 渐 近 分 布 。 考虑 形 如 

Py:Filo) = Floth/vNY), iol, ,6 (6.6.85) 
的 对 立 假设 , 采用 引 理 6.8.8 中 的 记号 , 注意 到 在 46.3.76)7 中 , 有 


PE 
而 在 对 立 假 设 人 .5.35) 之 下 , 则 有 
p= [7 [YP wth/ VE ) er (wt hy VE y. 


假定 上 式 右 边 在 积分 号 下 求 导 的 条 件 满足 (这 条 件 与 两 样本 的 情 
况 相 似 ), 则 使 用 Taylor 展开 , 注意 到 和 yw 一 /六 一 和 jot1), 易 得 


Mw + p> 一) 全 > [Fe)If (edetolN 7). 
因此 , 在 检验 统计 坪 《 记 号 间 引 理 6.3.8) 


s 村 


Sy= A > mT CO— 3’, 


(4- | 7° ao— (| 7 Cea) ) 
中 ， ~ (Toa) = (ni 一 pm 十 Gm)， 其 中 
lm VRam= VED/ TF (If ds. 
此 处 一 Xa 十 … 二 hoho， 使 用 与 引 理 6.3.8 完全 同样 的 论证 得 
出 , 当 入 一 co 时 ， 
A? 3 mT ys py -二 > YX2_1， 
因而 得 到 , 当 六 一 ce 时 ， 
Sy -一 > X20. 
其 中 
La ca 2 
Bh-BA TEP oI ede) /4 (6.5.86) 
而 得 在 上 述 对 立 假设 Ps 之 下 ,检验 总 的 渐 近 功效 为 
Hm Bo, CPy) = P(X? 0x1 (0 ), (6.5.87) 


”现在 考 虚 在 传统 的 正 态 假设 下 常用 的 也 检验 ， 它 基于 了 统 
计量 
了 究 m(CR 一 避 )。 
pe. 
加 在 $6.5( 一 ) 中 指 直 的 , 在 对 立 假设 Py 之 下 , 这 个 刀 检 验 的 渐 
近 功 效 是 


2 


lim Br,s CPy) = P {ri x (0)). (6G.5.388) 
其 中 
芒 一 训 Mh Bo (6.5.80) 


比较 (8.5.36) 一 (6.5.89) 看 出 , 车 在 考虑 检验 时 ， 将 对 立 假设 
中 的 ks 小 汶 dk, t= 1, "Cy 而 使 


oo —( 全 ITEP (a0Y /A (6.5.40) 


册 久 与 了 两 个 检验 在 这 了 丙 组 不 同 的 Px(-- 个 相应 于 一 个 相 
应 于 do) 上 有 同一 的 产 近 功效 ， 但 如 在 五 检验 中 将 样本 大 小 由 
到 为 BN, 因 dh/vVBN ~h/vMVNH， 则 在 样本 大 小 为 玫 玉 时 的 
三 检验 的 对 立 假 设 ， 与 在 样本 大 小 为 如 时 如 检验 的 对 立 假 设 一 
致 、 这 说 明 ， 

Tm Ba, x (Px) 一 Im Bs, ext Px). 


这 说 明 : 
o(8/T) Po (| TEF (If dr) /As 


与 人 6.5,22) 完 全 一 致 ,因此 , 那里 关于 Wileoxon 检验 与 拓 -检验 的 
比较 的 讨论 的 结果 , 完全 适用 于 此 处 县 ruskal-Wallis 检验 与 下 检 
验 的 比较 ， 而 关于 Fisher-Yates 检验 与 术 检 验 的 比较 ， 则 适用 于 
此 处 04- 检验 与 下 检验 的 比较 。 


1， 了 以 PK 记 参 数 为 入 的 Peisaon 分 布 , 则 当 了 ~ 癌 ,, 了 ~ 了 以 ) 时 ; 有 
PIX<2MN = PIDN. 
2. 设 工 一 PCN)， 而 当 笃定 Y=k 时 ， 瑟 的 条 站 分 布 为 rs 则 下 


属 如 ， YER 


3，(8) 设 下 ,了 独立, 了 ~ 炉子 ~ 鸡 , 则 卫 ~P( 至 到)8Ca, 为 


参数 为 ao, b 的 B- 分 布 ,其 密度 为 FE gl <2<1, a>0, 


b>0). (6) 设 芝 iis j=1, 4 为 自 久 Co OO) 中 抽出 的 iid., 梓 本 ， t=1, 
sd, 证 明 当 +> 壮 时 ， 
» fimasxf{Si -…，82} 
P (2 全 >) 
oa fd 
-Dr tl f= 对 一 全 
此 处 十 十 40 i .0 ?= Ky. 
= [| 
和 设 入 1 ss 有 独立 ， Nd oy), tl, 互 一 (次 1 wt 
左 1 di， ds 为 两 个 器 阶 对 称 方 阵 。 试用 将 41, 4 同时 化 为 对 角形 的 方法 
证 明 ， 车 Aiddy= 0, 贴 2 一 蕊 :1 已 与 了 ;一 习习 7 独立 ， 
5. 设 1 Xn 独 空 ， KA~ ND, oi), t=]， 记 
2" 向 淮 / 衣 言 ' 卫衣 诗人 2 
证 明了 一 次 -1， 
6， 设 1, Wy 加 为 iid., Xi1~ NO, oy, Al: “7p dn 为 任 章 常 数 ， 记 
0 让 / 裕 双 ,7 一 为 区， 证 明媚 与 了 独立 ， 
了 ey del 
?. 设 去 <a<l, 证 明 如 (e) 随 ” 增 加 而 下 降 ， 
、 。 8 中 3 - 
8. 证 明 当 加 > 人 问 村， Ber ny 为 5 的 增加 通 数 (参看 [7j, p. 223)， 


* OT» 


9， 设 叶 bp …， 为 记 ,， 玉 N02), 了 ~ 和 _g， 证 明 ， 
VTC E) /VEX 
= 


A 人 -3 三 、 
的 分 布 与 7 汪汪 二 区 的 分 布 要 同 , 


10., 在 上 题 中 ，, 以 六 记 1 yp .0 的 次 序 样本 ， 证 明 


sup [VIB /VEE ]= Ve 


由 此 证 明 ， 当 d> V 名 一 池 中 一 东 时 ,有 
P(ViIC 2X) /VE (XR)1>a) 
其 中 工 亿 各- 


开设 于 囊 独 窜 ， 互信 风 oo 这 也 2 则 变量 了 -- 训 /3 的 分 有 
称 为 双 非 中 心 FF 分布 , 试 利用 第 2 题 的 结果 写 出 了 的 密度 函数 ， 

12. 设 一 维 指数 分 布 族 {C(6)eerau(z)， 9E@} 的 自然 参数 空间 日 多 于 
一 点 ， 证 明 ， 光 分 布 族 为 正 态 的 充 要 条 件 为 其 方差 与 6 无 头 ， 为 Poisson 分 
布 的 充 要 条 件 为 其 均 人 等 于 其 方 莽 (提示 ， 考虑 此 分 布 族 的 特征 函数 、 注 : 
本 题 由 成 平 向 志 提 供 )、 

13. 分 布 族 辣 上 十。 记 的 上 确 界 为 4 着。 有 限 , 则 liwn CC9) 一 4 存 
在 有 限 , 且 4=0t0) 当 aEG, 4=0 当 gE 名, 车 wo， 网 上述 要 和 在 ， 
但 可 为 %. 

14. 分 布 族 同上 丁 , 且 设 巴 的 上 确 界 为 。 记 

b=sup it;p[(s, mm)]>0}, 
则 对 任何 2<b 有 Jim 0C9)e*…0. 又 车 5 有 限 且 pL}]>0, 则 lim 0(9)as 


1 
p03 
15. 举 出 一 维 指数 分 市 族 的 俩 子 , 其 自然 参数 空间 为 Fa，-)，(m cy 
Ia, 0); [a (一 <a<B< oo), 在 最 后 一 个 情况 下 , 旦 要 求 当 9=-5 时 分 布 
的 阶 矩 存在 有 限 , 但 对 任何 。>0, v+e 阶 矩 不 存在 ,此 处 z>0 事先 结 定 . 
16， 设 变量 (XX, 了 ) 的 分 布 为 二 维 指数 旗 ， 问 基 的 分 布 是 党 必 为 一 维 剖 
数 族 ? 


» PAB nm 


他. 在 中 性 给 一 个 加 DD, 找 一 个 二 维 指数 分 布 族 {C(O Byexp(bin 
4+ 全力 djolw, 扔 }， 使 其 自然 参数 空间 夫 为 DD 的 内 部 (不 包括 DD 的 局 界 ). 
18， 证 上 明 
EL[XECT|2)I= ELYECXIE)]Y, FLECZ|XTY| RI- BIE|XY). 
19. 证明 
VarCX) =ELVar( IY))+ VarL a(XIY)], 
Cov(X, TY=E[Cov {(X, YYI2Z]+COovIECA|2), ECTI2ZY], 
加 ， 设 加， …， Zs 独立 , 昌 二 BCXI…， 五,) 有 有 限 方 莽 , 而 
STE ZN — (nD ES). 
则 Var(S) 一 Var(S) 二 Var(C3 一 呈 ， 
对 ， 设 《 忆 了 ) 有 密度 函数 了 (ww, dz T(z, 内 = 刀 二 出 给 定 生 时 
的 正则 条 件 概率 函数 ， 
加， 设 样本 空间 为 (和 Sa 一 (RB，8,)， 其 上 的 避 率 分 布 为 9 个 NN(0， 
0 的 直 猴 , 而 CX，…， 了。) 一 六 XI， 证 明 在 给 定时 的 正则 条 件 概率 隐 
数 为 
P(d, T) 一 Surnad 的 面积 :vs 的 面积 . 
此 处 Br 为 Bs 四 以 原点 为 中 心 , 半径 为 的 球 醒 ， A 所 多 
23， 设 了 …，Xn 为 所.，Z1 的 密度 为 1 (0)dx，Kn=min(XI，…， 
,而 瑟 1g(CEDI<e、 证明 


BL9 (XVI Xa 9 (Ze) 


+ (fan 9 yy. 


i 五 
3 设 五 和 ~~ 六 (G 1， 了 NOD, 检 ，95 都 在 (一 ，%) 内 ， 凡 邦和 
和 分别 记 判 决 *aab” 和 “和 > 总 损 类 为 


0, 当 9 之 握 ， 
Lla, b, a ={ wap 


b—g,， 当 ab, 


Lin, b, a)={| o gb 


计算 此 判决 函数 的 风险 函数 ， 
5. 一 盒 中 有 六 个 妹 , 六 未知, 这 丈 个 球 上 分 曾 写 了 数字 卫 2，…， 克 ， 
现 从 其 中 区 机 地 有 放 回 地 接 出 邱 个 球 ， 记 下 其 上 的 数字 3 …， ,要 依 此 


# A 天 


悄 计 %, 搬 失 为 工 (5 四 一 (站 一 四 3. 取 判决 函数 (六 0 一 下 IDAKK 人 1 
“ys 决定 下 , 使 风险 达到 最 小 ,并 求 当 三 一 co 时 五 的 极 趴 ， 

26， 访 于 :~ 及 WO, 0， 一 1 3,3, 0 po i 都 在 但 ，%) 内 ， 要 从 观 演 
导 已 ， 瑟 8， 了 开 3 决定 向， 后 ， 嫩 中 何者 最 大 ， 以 也 记 最 大 ”这 个 车 决 ， 
i 一 1, 3, 3, 损失 为 

0, 车 所 在 鱼 , ;, 由 中 最 大 ， 
L(G 名 9, dD) 一 1 2， 若 鸟 在 鲍 , %, 加 中 最 小 , 
1， 其 它 情 况 ， 
取 狮 决 函 数 
(ZI 六 0 及 9) 二 而 ， 若 入 ,一 max (Zi 站 9 ZZ), 
试 计算 ROL 出 3 的 ， : 

27. 试 证 明 例 主 ,5.3 中 的 统计 重 是 充分 的 . 

28. 试 证 明 ， 对 人 在 何 分 布 族 {( 和 sy， 了 oe)，9 己 晶 }， 纵 zw) = 必 为 一 充 
分 统计 量 。 它 是 否 必 为 完全 的 ,或 必 为 不 完全 的 ? 

8. 在 以 下 两 例 中 , 直接 由 定义 而 不 用 分 解 定 理 , 证 明 并 为 充分 统计 是: 
id NO DD) 的 
密度 为 esf rr, 0>0. 

30， 设 2) 为 定义 于 人 0，o) 的 非 负 工 -可 测 函 数 ， 且 对 人 在 何 9>0, 0 


< faDan<o， 考 虐 密 度 族 {jo(a)dzm, 0<9< oo}, 其 中 


-1 
em [ fray | Fa，o<s<e， 
0, 其 它 < 
而 Z，…，X 为 自 此 总 体 中 抽出 的 iid. 样本 ， 证 明 ，mex(Xs,…, 下 ,) 为 
一 完全 充分 统计 量 . 

31. 设 了 …， 33m 和 了 …，Y。 分别 为 自 和 (a，07) 和 要 (a，po?) 中 
抽出 的 i 样本 , p>0 已 知 ， 试 定 出 (Xz, …， Xm, 了 1,…，Y。) 的 分 布 族 的 
一 个 完全 充分 统计 量 . 

32，(a). 证 明 分 布 族 { 城 :3>0} 是 一 个 完全 分 布 族 (提示 ; 利用 Poiaeon 
分 布 族 的 完全 性 )，。(b) 证 明 及 分 布 族 {BCa, 太 :4>0, 5>0} ( 见 第 三 是 ) 是 
”一 个 完全 分 布 族 

58， 考虑 分 布 族 {NCa, o9) :一 一 <a<eo os>>0j， XU …， 蕊 ,为 自 其 
中 四 出 的 iid. 样本 , 证 明 ， 对 此 分 布 族 而 言 ，( 习 82?) 仍 为 充分 统计 量 . 

34. 若 ix) 为 分 布 汉 fei， Ja，Pu)，6EB} 的 充分 统计 量 ， 而 
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[iFCXY1]< 吕 对 任何 9E9， 证 明 : 加 [fCZ)| 林 可 选 得 与 8 无 关 ( 注 章 : 
此 处 并 未 假设 正则 条 件 概率 衣 数 存在 ， 提示 ， 先 考虑 了 (0) 一 IL402) 的 情况 ， 
4 Eeew。， 热 后 用 条 件 期 望 的 性 质 推 到 一 般 情 况 )- 

35， 设 有 分 布 并 {C2Ddr, 一 oo <8<<oj， 其 中 四 (一 人 com) 
也，…， Zn 为 抽 自 其 中 的 击 . 样本 ， 开 一 imin(Xs…， 了 nw) .证 明 (Xo 及) 


为 充分 统计 量 , 且 a; 与 宫 五 ,一 六 ww 独立 . 


36， 设 有 分 布 族 {f(z)de: 三,2f(z)de 一 0j， 证 明 它 是 一 个 完全 分 布 
族 , 

37. 设 1 …, 双 。 为 4.， ~ 情 (9 地， 9+ 喜 ) 一 <9<o0, 证 
明 ， fminCXy …， 下) max …, 不 )] 为 一 充分 统计 里 ,但 不 是 完全 的 ， 

38， 设 1 … Xs 为 诅 ， ZI~ 入 (0, 0 0>0. 证 明 : (高, 名 ZZ) 
为 充分 统计 重 ,但 不 是 有 界 完全 的 . 

39. 设 (二 80) 一 (Ra, Bo), (9, 99) = (Bs, H2); ($F 89) ~ (Ra, Hy), 
其 中 zo 一 扔 XB， 考 开 由 (4 84) 到 (7 名 5 ) 的 统计 量 1C%, 奶 一 (4 的 及 
(二 2 到 (名 gc) 的 统计 量 8(m 奶 一 (4 坊 ， 这 两 个 统计 量 形 式 上 完全 
一 样 ,本 质 上 有 何不 同 ? 

扒 ， 设 (和 名 史 为 一 可 浏 空间 ，4g 的 任 一 子 0- 域 入 称 为 有 性 质 了 ,如 
果 存 在 一 个 空间 ,及 定义 于 人 上 取 值 于 的 函数 12%), 到 

有 0 一 {4:A4 扬 宝 g; 丰 竹 了 的 子 集 全, 致 4= 太 必 TI)}. 

试 举 出 这 样 的 可 测 空间 (2 gu) ,使 3g 的 某 个 子 o- 城 @ 不 具备 性 质 呈 ( 提 
示 ， 取 旬 地 ， 煞 w# 为 Ri 之 一 切 子 集 所 成 的 0- 域 ,而 名, 为 量 的 一 切 至 多 可 
列 集 及 其 余 集 所 成 的 子 2- 域 ). 

4 氏 . 设 瑟 = (Xu …，X,) 的 分 布 有 密度 (对 某 0c- 有 限 测度 站 

六 (四 =B(g)erw 0ED, 
如 为 自然 参数 空间 , 又 设 对 某 个 和 所 @, 及 的 分 布 非 退 化 , 求证 : 
{9,E9, iml, 2, 010} = Bo, (ZY Er, (XY. 
4 各. 记号 同上 题 ,证 明 一 log 8 办 为 8 在 售 上 的 严重 函数 . 
4 设 加 五 为 取 家 分 布 族 
Nig, oN mH Edm, TPO 

的 记 . 样本 。 证 明 ;《 久 , 8) 仍 为 充分 统计 量 . 此 处 


实 ~ 二 加 和， 


竹 ， 举 出 这 样 的 样本 空间 (时 多 w?)》 的 例子 , 其 中 有 有 we 的 子叶 域 多 使 
对 任何 统计 量 $= 二 tz)， 只 要 + 的 值 域 空间 (3 洽 #) 为 网 氏 的 , 就 有 1( 轨 yg) 
哮 轴 0。 但 是 , 若 对 鱼 计 量 的 值 域 空间 不 如 任何 限制 , 则 对 任何 o- 域 6 计 饥 ， 
存在 一 值 域 空 间 为 其 可 测 空 间 4z， 再 四 的 统计 量 C9 省力 依 和 而 定 )， 致 
Bo tl yg). 

45. 举 合 证 明定 理 1.6.8 的 道 不 实 [ 提 示 : 取 和 一 六 一 加 一 媚 ， gw 一 由 
一 需 ， 放 瑟 ) 二 六 ，Pe({0}) 二 1， 对 任何 8ERLI 又 记 卫 )= 玉 |， 试 加 上 一 定 
的 条件 而 证 明 此 定理 之 道 [ 提 示 : 考 虚 条 忻 ， 对 任何 甸 全 如, Bs 挟 昌 , 身 计 护 ， 
不 存在 4 所 Bg, 歌 P(A4) 一 Ps,(4°) = 
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1. . 设 有 分 布 族 和 eIo0, kz)， 昌 > 0 时， 允 ，…， 王 rw 为 良 其 中 抽出 的 
iid, 样本 , 求 扩 的 了 YU 了 (注意 缚 一 Po 司 )。 此 处 >0 为 给 定 的 
已 知 数 . 

3. 设 且 …， 室 n 为 抽 自 Poisson 分 布 旗 和 PONY, A> 上 3 中 的 iid. 样本 ， 
求 由 (9)e ?25/1CE 已 知 ), CAC 玉 已 知 ) 的 MMYUAE. 

3，{a) 以 及 记 站 人 0 屿 的 分 布 清 数 ， 设 了 ~ 和 (4，g) ,证明 EB[ 中 CZ)] 


= {和}， 册 利用) 证明， 者 天。…, 也 ,为 抽 自 {NC6,， 1)， 一 o 
< 和 < 的 通 . 样本 , 则 PC < =@(r 一 的 的 MIVU 了 为 ef) 


2 一 1 


(0) 密度 函数 gel2) 一 -二 exp | - 亏 (z 一 0)? ] 在 z=+ 处 之 值 的 人 MVUE 


19 -一 bE 
为 [2 人 (下 op [王室 二 这] 

4， 设 了 … 下 s 为 自 { 酝 (2 320)，9> 时 中 抽出 的 过. 样本 ， 证 明 : 统 
计量 # 问 站) 一 《min 了 max 互 ) 为 充分 但 非 完 全 ， 投 出 8 的 两 个 不 
局 的 基于 t 的 无 二 估计 . 罗 

5. 在 例 3.1.7 中 ,假定 gp) 在 lq, 5) 的 任 一 闭 有 界 区 间 上 绝对 连续 , 且 
Hm (9C0)/ 二 (9)) 一 0， 则 出 (3.1.29) 式 定义 的 pg， 使 p(X1) 为 9(9) 的 无 信 
庆 讨 ， 双 证明 :， 99) 的 如 VUE 可 表 为 

fs (AX) 一 所 总 1 ~ ZA LR Rh ER) . 
举 这 样 的 例子 ， 当 im (g(9)/(9)) ~0 不 成 立时 ， 上 式 决定 的 5CXay) 不 是 
9《8) 的 无 俩 估计 。 
.和 


6， 设 六， …-, ZX, 为 自 几何 分 布 族 
PR 20, 1, 2, 1, DO<H<1l 
中 抽出 的 设 . 样本 , 求 上 8 的 MYUB 

7， 设 本 -…， Xn 为 自 (9) 二 项 分 布 族 {BCE, 的 , 0<0<1l 五 已 知 }， 
Cb) Poisson 分 布 族 {PP( 的 , 8>0} 中 抽出 的 诅 . 样本 在 每 个 情况 下 , 找 出 
(0) 的 MVUB 存在 的 充 要 条 件 . 

83， 在 上 题 (a) 之 下 , 找 出 8 一 次 的 划 YUE 及 MVUE 的 方差 。 将 这 
方差 与 C-B 下界 比较 . 

9， 设 了 …, 互 ,为 取 自 契 (0。coa] 中 的 通 . 样本 ， 求 exp Lo/2) 的 
MVUE， 计 算 此 MVU 玉 的 方差 并 与 0-BR 下 界 比较 ,又 问 ， 它 是 否 对 荣 个 契 
达到 Bhattacharyga 的 下 界 . 

10. 证 明 ，Bhattacharyga 下 界 当 攻 增 加 时 非 降 . 

11， 设 束 ，…， 互 ,为 抽身 Poisson 分 布 族 {PC)，%> 人 0 的 这. 样本 ， 
要 估计 er， 算出 及 =2 时 的 Bhattacharyga 下 界 ， 

13， 设 系 ，…。 开 。 和 Ti 了。 分 别 为 取 自 (oa 9) 和 Wg, 员 申 
的 id, 样本 , 9, 0 中 都 是 未 知 参 数 ， 证 明 ，a 的 村 VUB 不 存在 ， 又 ， 算 
出 a 的 无 偏 估计 方 关 的 C- 忆 下 界 . 考虑 当 co 号 已 知 的 情况 . 


139, 不 依赖 定理 3,.3.5 的 推论 直接 证 明 ， 若 了，…， 世 为 到 自 
(ay oo) 中 的 记 , 样本 , CZ …， Zn) 为 加 的 任 一 无 偏 估计 ， 则 Cov (及 ， 
分 二 0. : 

14. 设 参 数 空 间 只 有 两 个 点 : 9 一 0 和 日 = 1。 当 0 一 4 时， 总 体 分 布 为 
folmyde = Dtr)dr, 当 晶 开 时 , 总体 分 布 为 有 (ods ne) . 设 
互 为 直 此 总体 中 抽出 的 太 小 为 工 的 祥 本 . 证明: 对 任 给 s> 妨 存在 如 之 一 无 
偏 估计 。, 致 Varo($。) <e。 但 不 存在 8 的 无 偏 估 计 8 致 Vare( 纪 一 0《 提 
示 :， 对 充分 大 的 自然 数 m 考虑 形 如 

TO 0， 站 一 了 <(B 
io-| ds, 
0, 其 它 
适当 洗 择 其 中 之 常数 4.b,9, 使 8EE 0, 了), 当 n 下 ~* 时 4 一 1 而 6,8 有 非 
有 限 的 极限 )， 

6， 设 广 (eydr 和 了 otz)de 为 两 个 密度 函数 . 考虑 分 布 族 {f(z, pda， 

0<9<17, 其 中 站 (%, 四 =9 及 (20) 十 避 一 的 fa(2)}， 设 年 …， 了 sr 为 抽 自 此 
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分 布 族 的 记 ， 样 本 ， 求 8 的 无 偏 估计 的 方差 的 所 下 下 界 ， 证 明 此 下 界 革 小 
于 一 全 ,等 号 当 昌 仅 当 户 (z)jaGc) 一 0 (ae. Zi) 时 达到 ， 对 后 一 事实 
作出 解释 ， 

16. 对 例 2.1.4, 算出 的 方 蒜 , 求 这 方差 的 MVUE. 

17. 五 的 分 布 族 为 {f(z g)az 一 Bym oxp( 一 8 -Um wv)dr, 0<0 
< 吕 }, m 已 知 。 样 本 大 小 为 1。 求 旧 的 报 大 似 然 估计 ， 证 明 ; 除非 %= 世 它 
不 是 无 偏 的 ， 修 改 之 使 成 为 无 网 ， 当 为 很 大 时 , 本 例 说 明了 什么 问题 ? 

18. 设 互 为 从 Poisson 分 布 族 让 取出 的 大 小 为 1 的 样本 ， 找 出 [P,( 工 
一 0 的 无 偏 估 计 ， 这 个 例子 说 明了 什么 问题 % 

19. 设 以 w …-， Zs 为 自 正 访 总 体 Wa, oa) 中 抽出 的 i 记 . 样本 ,要 估计 
9， 损失 殉 数 为 Co3 由 一 圳 《a1 一 0d)9。 (9) 证 明 ， 设 3(Z1。…，Xw) 为 
尾 一 估计 ,其 凤 险 消 数 R(ta, o, 信 宇 @={ta, 中 :一 << 0<a<oo} 
上 处 处 有 限 , 则 其 风险 必 在 @@ 上 处 处 连续 ，( 委 确定 (a, em) 之 一 先 验 分 布 如 
下 ，@, 0 独立 , 且 

-~ 参数 为 和 ，* 的 Gamrms 分 布 
a~Ne0, io), 
找 出 o2 的 Bayes 估计 ,证 明 其 风险 函数 连续 , 因而 此 Bayes 伟 计 可 容许 ， 令 
X -0, r- co， 求 此 Bayes 估计 的 极限 ， 并 问 此 家 限 是 否 为 容许 估计 . 

20， 设 且 , …， ZX 为 自 { 及 (0, 办; 9 中 中 抽出 的 沁 . 样本 , 先 驻 分 布 
为 9~RC0, 四 ，a>0 已 知 ， 求 在 平方 撒 失 (9 一 下 3 之 下 , 日 的 Bayes 估计 . 

21，ta) 证 其 组 各 公式 


D3 Nh N+1 
SN( 晨 一 -元 ) ( 各 十 1 ): neN, meN, k=0, bs 


Qh) 利用 (8) 解决 下 面 的 宫 题 ， 设 哇 服 从 起 几何 分 布 ， 


Perror 人 CO 人 OA) az 


此 处 癌 , 半 已 知 , 型 为 参数 ， 设 是 的 先 驻 分 布 为 均匀 的 , 即 


1 
有 一 了 一 rp 下 一 0， pm， 
在 平方 损失 《下 一 四 谤 下 ,算出 于 的 Bayes 估计 为 
(T+ CNtT2) 1 
和 十 包 * 
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Bo 


征明 这 估计 的 Bayes 风险 为 二 全 让 全 信 一 下。 (o) 算出 常用 估计 
Bayes 风险 , 证 明 它 大 于 上 述 依 . 


台 ，(s) 设 不 为 一 维 分 布 函 数 , 0<p<1。 证 明 ， 函数 
gw- a-pD nape | -parts) 
的 最 小 值 在 也 的 p- 分 位 数 处 达到 (Es 称 为 王 的 z- 分 位 数 ， 若 六 (>> 儿 
(6s~0) < 从 ，() 没 已 。…， 忆 为 自分 布 族 {x6)dj(n)，a<0< 反 
中 抽出 的 ia, 样本 , 在 (ay 仿 上 给 出 任 一 先 验 分 布 9(g)av(8), 以 及 损失 函数 
Ze -| -有 Go， 30<e 

试 求 6 的 Bayes 合计 ， 当 9 去 时 得 到 什么 结果 ? 

23。 极 大 似 热 估计 是 否 必 为 可 容许 估计 (平方 损失 

24. 设 四 的 分 布 族 为 PX 一 1) = 一 PC 一 0) 一 凡 0<9<1， 损 失 函 
数 为 (9 一 d)*， 先 验 分 布 为 


PO) = 0=1—00) —1, 

样本 大 小 为 1, 试 决 定 后 , 使 由 此 先 验 分 布 所 决定 的 Bayes 估计 为 Minimax 
估计 (本 例 说 明 ， 两 个 截然 不 同 的 先 验 分 布 可 以 有 同一 的 Bayes 解 ). 

35， 设 下 …, ZX, 为 抽 自 下 (6- 寺 ,9+ 二 ) -<9<om} 的 iid. 祥 
本 , 损 类 函数 为 [9 一 4|， 证 朋 的 Minimaz 情 计 为 去 (min Xs + max 0). 
若 损 失 浮 数 为 8 一 看 *， 情 况 如 何 ? (提示 : 取 先 验 分 布 玉 (一 及 ， KK), 合 
EE 

36. 设 ,也 ,为 抽 自 和 (0a) 中 的 iid. 样本 ,损失 函 数 为 
(qo? 一 D3/ot， 证 明 g? 的 Minimax 估计 为 一 上 b> 到 (提示 ; 取 19 题 中 所 
给 的 先 验 分 布 ， 又 ， 参 署 中 题 )， 

27. 设 四 | 为 取 自 二 项 分 布 族 {Bm,p)，0<p<1) 中 大 小 为 工 的 样本 ， 
n 已 知 , 损失 函数 为 
证 明 : (XJ) =0 为 日 的 可 容许 MMinimax 估计 . 

28. 证 1 | 工 " 为 取 自 M0, oy) 中 的 ij 过， 样本 ， 记 音 一 【 互 1i 2 
考虑 一 切 形 如 y=edz 的 变换 所 成 的 群 ， 此 处 4 为 正 交 阵 ，c#0， 又 损失 函 


0<p<1, Pp 已 知 , 


pr 


数 与 06 题 周 . 试 求 出 o2 的 不 变 估计 的 一 般 形状 ,并 由 此 训 出 最 优 不 变 估计 . 
骂 . 设 开 的 分 布 为 


Poe( 瑟 一 8 一 了 P(X~0+1) 一 二 ， 一 ce<6<ce. 
损失 酌 痢 为 
0， 当 19-a|>1, 
试 求 出 8 的 形 如 蕊 +ete 为 常数 } 的 估计 中 的 最 优 者 ,并 证 明 它 不 是 可 容许 估 
计 ， 估计 


Lt@, a) -1 


5 十 ， 当 二 0， 
S01 当 z>。 
优 于 它 . 

30. 证 明 例 3.4.5 中 的 断言 除非 蕊 .ofqG(X))] 存在 有 限 ， 必 有 
[a2(Z)) 一 0)"]= 用 出 3.4.5 的 证 法 解 下 面 的 问题 ， 设 Za, …， 
加 为 到 自 {BC0, 9), 9>0} 中 的 这, 样本 , 损失 函数 为 人 6 一 四 362、 考虑 一 
切 形 如 此 exo i 一 I，，…,$ 的 变换 (ce> 人 的 群 ， 求 在 此 群 下 的 最 优 未 变 估 
计 . 

31， 证 明 系 3.4.3 (提示 ， 注意 风险 冰 数 为 常数 ). 

33， 用 定理 3.4.1, 得 出 票 2.4.2 类 似 的 推理 , 证 明 第 26 题 的 结论 . 

33， 设 五 为 取 自 Poisson 分 布 族 {PQ)，X>0} 中 大 小 为 1 的 样本 . 证 
明 在 损失 畜 数 工 0 加) ~ 一 4)3/3 之 下 ， 斑 为 的 容许 的 Minimax 俏 计 . 

34. 设 瑟 。… 下 为 到 自分 布 误 上坟 emwefo ww)，0<0<om} 中 的 
iid. 样本 , 证 明 : 在 损失 函数 也 (9, 四 一 地 一 下 3189 之 下 ， 日 的 容许 Miniivax 
估计 为 ;5 工 斑 ,而 贡 VU 了 里 不 是 可 容许 估计 . 

的- 设 (Xa 了 …，(CKw Zn)， 为 抽 自 以 0 为 中 心 半径 为 9 的 图 内 均 
色 分 布 的 馆 , 样本 , 0<8<co、 求 4 的 极 大 似 然 合计 及 此 极 大 似 然 估计 之 方 
莽 , 并 调整 此 入 计 使 成 为 无 仿 估 计 . 

中， 设 了 4,…, Xm 为 取 自 和 ba, oi) 的 iid. 样本, 证 也 oc,0<of< 
oo Ti ,03 和 都 是 未 知 参数 , 记 


1 。 
对 Si= Zo-X’, tml 


#4 一 1 
证 明 当 每 个 徊 一 % 时 , 估计 最 
+ BO 


EX Bin Ro ) /SD 


是 as 的 了 BAI 估计 ， 

37， 设 卫 ， 且 4， ri.， 驾 1 的 分 布 为 

PelR>l) 1— P(E=0=0, 0<0<1, 

先 验 分 布 为 (0, I), 拓 失 为 LC, 办 一 一 0)?。， 抽 祥 费 用 为 每 抽 一 个 有 常 
数 费用 ">0， 抽样 方案 为 : 定 出 自然 数 n, 每 次 观察 一 个 辽 ,( 接 1, 下 4,…… 
的 次 序 ), 直到 抽 得 汉人 个 1 为 止 ， 求 Bayes 悄 计 及 其 风险 (注意 ， 这 是 求 在 已 
定 停 正法 则 之 下 的 Bayes 知 计 ， 不 是 整个 问题 的 Bayes 解 )。 又 若 此 抽样 方 
案 在 抽样 达到 交 次 本 截断 ， 有 求 Bayes 估计 及 其 风险 . 

引 ， 设 3 为 一 确定 的 统计 判决 问题 的 一 个 序 贯 判决 函数 , 损失 函数 上 界 
为 作品 ,每 观察 一 次 的 费用 为 常数 c>0, 先 验 分 布 为 名 太 , 为 8 三 抽样 
达到 办 次 时 的 截断 (这 意味 着 , 若 抽样 在 第 w 一 1 次 或 之 前 结束 , 由 采取 的 判 
决 与 5 一 祥 , 若 在 第 各 次 结束 , 则 采取 的 判决 不 必 与 5 有 关 ), 则 


BB) B10)(1+-2E), 


注意 这 里 风险 包括 抽样 费用 . 
39， 设 卫 的 分 布 为 


PAX=D = PAX, 0>1. 


区 损失 函数 有 异 鲁 抽样 费用 为 每 抽 一 个 有 常数 塌 用 c>0， 证 明 ， 在 任 一 先 
验 分 布 之 下 , 日 的 序 贯 Bayes 估计 【基于 立 的 淹 , 样本 开 ， 间 ， … 和 为， 或 
者 不 抽样 作 一 羯 决 , 或 者 抽 到 一 个 不 是 1 的 什 汶 止 ， 明 即 以 后 省 作为 8 之 佑 
计 ¢ 此 四 假定 损 具 函数 三 满足 条 件 卫 (四 =0, 当 8= 辣 ， 

各 设 革 的 分 布 为 {ROO, 的 , 8 二 信 . 每 吹 抽 样 则 用 为 常数 o>0, 损 源 
冰 数 为 人 划一)? 先 验 分 布 为 五 (0, 的 ,最 多 抽样 三 次 ， 试 求 此 截断 判决 问题 
的 Bayea 解 . 

条. 举 出 这 样 的 例子 9- 妇 这 等 式 在 全 的 个 别 点 达到 壬 号 ,而 站 其余 的 
点 则 否 。 

把 ， 举 出 这 样 一 个 分 布 族 《25 gw Pe), 9E@， 其 完全 充分 统计 量 不 存 
在 ， 但 对 某 个 9 站 ,其 MVUE 存在 [提示 : 取 呈 一 (一 二 0, 1 3, …Y, 9 一 
B01 Pt{—1) -0, Pi)= 1-0, 入 和 gD = 
( 注 ， 本 便 是 陈 桩 景 、 卢 昆 充 起 袜 城 等 阅 志 发 现 并 告诉 作者 的 ),， 

等. 设 于 为 取 自 1，320):9> 中 的 大 小 为 2 的 样本 ， 证 明 :， 乡 的 
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MYUE 不 存在 ( 注 : 可 以 证 明 ,对 任意 样本 大 小 >2, 本 是 结论 也 对 )- 

牧 ， 设 折 为 一 切 其 方差 靳 于 1 的 一 维 分 布 的 族 , 了,，…， 辽 a 为 质 自 天 
中 某 个 分 布 的 iia, 和 样本， 证明， 车 令 9(F) 一 (FF 的 均 族 》”， 太 REF， 则 当 
%> 工 时 9 了 的 下 YU 不 存在 ， 布 当 # 一 1 时 则 存在 ， 

合 ， 证 明 ， 不 论 在 任何 情况 下 《不 论 完 全 充分 统计 量 是 否 存 在 )， 只 枝 
MVUB 存在 , 它 必 和 然 有 唯一 性 (在 &. 9. 相等 不 加 分 别 的 意 头 下 》. 


第 三 章 


1，(e) 设 吾 ，…， 了 ,为 抽 自 {RCO，，9> 人 0 中 的 ,样本 ， 给 定 - 
>0, 求 6 所 抽 司 98> 后 的 UMP 检验，(b) 设 开 ,…, Zs 为 抽 自 仙 二 项 
分 布 . : 
马 寺 总 一 工 
k—1 
的 ia. 祥 本 (已 知 ), 纵 定 9e (0 DD, 求 8&6099> 抽 的 JUMP 检验 
2. 设 五 , …, ZZ 为 摘自 {RO0, 鸭 ,g> 人 或 指数 分 布 族 
{eso oy CO am, > 0) | 
中 的 iid. 祥 本 ， Xs 吃 … 忆 牙 (w 为 其 次 序 统计 量 , 而 我 们 手头 只 有 资料 了 ay 
“wler<n)， 在 这 此 资料 的 基础 上 求 6< 如 er9>69 的 UMP 检验 ， 
”>0 已 知 , 

3， 设 了 ou …， 加 为 自 {2(6, 29), 98>0} 中 抽出 的 0， 样本 , 铅 >0 已 
知 , 问 昌 sbit bp 的 UMP 检验 是 否 存 在 ”- 

4 设 # 维 随 机 疝 量 〈《 开 5 -…， 玉 。) 在 互 和 到 之 下 的 分 布 分 别 为 fel 
和 有 Got ea 证 表 : ,对 任何 四 0<asl 
互 e* 开 的 水 平 上 的 TMP 非 随机 化 检验 必 存 在 . 

5. 设 珠 。 …， Xm 和 了 1 …， 了 分 别 是 从 困 (a; 1) 和 六 (人防 中 抽出 
的 过 . 样本 , 证 明 ，3#<et*b>e 的 UMP 检验 存在 , 且 其 否定 二 有 了 一 半 >e 
的 形式 (提示 ， 对 任 一 特定 的 对 立 假设 (at 2 了)， 本 < 有 取 fay 可， qa) 
上 的 先 验 分 布 集中 于 as 一 5 一 和 一 点 ). 

6， 设 互 ， … Xm 和 了 …。 了 ,分别 为 抽 自 和 (4, o 中 以 及 WB, 的 让 
的 iid. 样本 ， 村 检验 假设 > 呈 必 io 全 证 明 当 a4, 了 3 都 已 知 时 ， 
UMP 检验 存在 且 有 否定 域 六 (Z, 一 7)? / 沪 ( 卫 一 卫 )*>c (揭示 ， 先 验 分 


人。 


PC 光一 ) a—0)s, 0<0<1 


布 集中 于 my=os 上 适当 的 一 点 ). (by) 车 a, 5 者 未知 , UMP 检验 不 存在 (所 
未， 在 求 的 > 四 < (oo cao， oo，bo 的 UMP 检验 (此 处 ci< ca 时 ， 取 
(04, o% a, 的 先 验 分 布 如 下 ，(o3, o 台 的 先 验 分 布 集中 于 {co1~o2} 的 适 
当 的 一 点 0, 而 4 一 qo, 的 先 验 分 布 汶 厅 (be, 二 (ca 一 9 )， 避 车 a， 4 
之 中 有 一 个 已 知 , 另 一 个 未 知 , 情况 如 何 ( 答 ，a 已 知 5 未知 时 , UMP 检验 存 
在 ,8 已 知 9 未 知 时 则 否 .证 明之 ). 

7，(8) 设 Xs 了, 独立 ,都 服从 二 项 分 布 日 (n, 内 e 为 整数 ,1 <<c 志 % 一 1， 
证 明 : go, 区 一 Ppl 了 一 耻 n>>0)， 当 0<p<<1 时 的 严格 最 大 四 在 gp 二 处 
薄利 (提示 首先 注意 ， 当 c=1, 2, 和 时 ,有 ET 一 全 | =6) > 三江] 了 
一 已 ,= 一 e+1T( 请 读者 自 证 )、 记 4 一 1 一 p, 令 

hn, Pp) 一 plY,— Z| >O=29n, PD), 
则 有 
Rlntl, p) =2pg [hori(n, P+ Pls— Xn) =etD 


+ 让 PoC|Yo -Zoo) |+ (p40) hkn, 车 
一 38 hortn, PT Bet, Pj+ Pt hon, 多 )， 
用 归纳 法 ,假定 本 题 的 断言 对 成 立 ,注意 坟 十 一 委 一 2( 子 pq), 有 
A (+l, 末 ) 一 和 人 + 2) >(F-ra)| hn (mE) th (nr 玛 ) 
一 3ic( mw 襄 咱 = (二 -28J[PCIZ 一 瑟 1=a 
一 BC|zo 一 己 | 一 e+ 了 > 0, 当 p 杰 二 . 
这 完成 了 归纳 征明， 人 b) 设 成 了 独立 ， 和 ~ 五, py), 了 一 B(n Po). 考 庶 


检验 问题 入 庆 ps 合生 一 2 Pi 一 囊 ; 于 处 唆 ; 的 已 知 , 可 天 氏 睛 P12 一 1. 证 
明 其 UMP 检验 有 形状 


i， 车 了 一 了 >>6， 
duE, D— Fy 著 了 一 及 =a， 
D,， 车 了 一 五 <c 
[提示 , 取 fpo<m} 上 的 先 验 分 布 集中 于 ( 训 , 诗 一点. 证 明 (尘土)>Cp5 
W) 的 UMP 检验 有 上 述 形 式 ， 以 BCpu ps) 记 比 袍 验 的 功效 ,证 蚌 当 各 之 如 
= 900» 


时 必 有 Ap ps) < ( 喜 , 去 ). 为 此 先 确定 易 证 的 事实 BCp。 的) <B(p1 p1) 


当 js 所 pr, 再 利 月 人 a)]。 人 证 明 各 字 各 号 入 过 ps 的 UMP 检验 泵 枚 在 [ 提 
示 ， 只 雪 证 明 人 bp) 中 得 出 的 检验 不 是 向 >ba > 缴 < 多 的 UMP 术 验 ， 为 此 注 
意 ,车 检验 的 真实 水 平 为 a0<a<1, 则 由 (b) 可 知 BCp, 从 < 有 (于 , 王 } 一 ， 
故 对 充分 小 的 >0 有 Btp,， pay<a， 这 证 明了 (b) 中 提出 的 检验 由 不 是 
UMP 的 ]， 

8. 设 g 为 Datygrz 的 UMPT 检验 。 则 由 在 下 述 意义 下 是 让 容许 的 ， 
不 存在 水 平 不 超过 中 的 水 平 的 检验 由 ， 致 B(9)> Bgl9) 对 任何 PEGz， 且 
不 等 号 至 少 对 一 个 BE 成 立 ， 

9， 设 互 , 了 独立， 分 别 服从 指数 谈 分 布 1(g)esads qr<9< 加 } 和 
{D(pjepsGw ma<p<ib} 设 四 二 ci<piy <o<< 私 证明， 

de, po CO, gp) 4 Col, ca) 

的 UMPU 检验 不 存在 . 

10. 设 样本 (YD 满足 指数 族 分 布 {C9 beeereulu(m 的 :pu 
89} 而 (6 罗 为 全 的 内 点 ， 证 角 : 让 5 的 
UMPU 检验 就 是 由 (zx 扩大 < ( 注 ， 此 题 见 [7] p. 151, 参看 该 处 的 仔细 提 
示 )， 

了 这. 没 样 本 四, 了 独立 ， 工 一 Bo p19) 了 了 ~(ny 2 9 已 知 ， 记 

p= (PafL—p) + pl — rh), 
取 定 po PitPo 志 9), 证 明 ， 若 四 为 p=po 品 p= 的 一 个 水 平和 检验 ， 则 
inf {BpCpr, pa) |p 一 p1} <a， 解 释 这 个 结果 的 意义 . 
12， 设立 本 民 。…， 时 。 狐 立 ， 玉 ,的 分 布 为 
PtrX=1=1— PX,~ 人 0 = -exp {一 一 i -1 
把 ,为 未 知 参数 ， 求 8 一 0 Ba>0 的 UMPU 检验 . 

13. 设 样本 了 …， XX 独立 ， 五 一 Na oi ~ 对 C0， 
oi 十 1 … 1 0 91 为 未 知 参 数 ， 求 4 一 0 40 的 UMPU 检验 . 

14. 设 开 ， …， Zs 为 抽 自 分 布 族 [exp[ 一 (5D)/aJIw,(0):0<a 
<m， ~ <b<oo}| 中 的 iig. 样本 . 证 明 ， 者 以 Xay<…< 下 (wy 记 次 序 统计 


最 ,其 全 ? 开 a 下 一 全 0 py 王 一 芷 wm 租 互 狐 立 , Cb) 当 ea 一 ao 固定 时 ， 
Se 为 完全 充分 统计 重 . (0) 出 此 .用 定理 3.3.1, 仿照 定理 383.3.5 中 可 二 互 ， 
部 分 的 处 理 , 证 明 一 m 哼 & 玫 0 的 UMPU 检验 有 否定 城 


TO0 * 


es — Rn) og. 


15. 设 当 好 成 立时 , 美的 分 布 族 为 {tw 一 外 dx: 一 oe <9<o07, 而 当 玉 
成 立时 , 互 的 分 布 族 为 9(t 一 全 呈 ;一品 <9 < 比 处 fg 已 知 设 笠 1 
,为 素 的 iid, 样本 , 求 在 平移 变换 群 下 , 五 二 到 的 UMPI 检验 .。" 

16. 考虑 由 En 到 本 的 变换 群 妈 一 czo f==1，…, 9 c>0. 证 明 一 个 极 
大 不 变量 为 


Go x lz 当 闻 空 *0， 

《ov 0), 当 曙 一 … 一 如 一 0. 

仿 此 ， 扳 出 变换 群 必 一 am 十 及 5 二 4 记 人 一 ;<b 二 0 的 一 个 极 大 
不 变 其 . 

17、 设 卫 ，…， 玉 和 了 4，…， 圈 s 分 别 为 取 自 分 布 这 {qe "WWI, ,ws 
{mdr 0 一 中 天 下 二 oo 和 {oT wm 0, — oo <b 
<e 中 的 词 . 样本 ， 考 虑 变换 群 

=aT+ 8, t= 7, my; FAY y+ j=1, -…, 1, 


Pm | 


U<a<mo, ~ Bo, ~ oy. 


求 在 此 变 技 群 之 下 ， do >4 的 UMPI 检 验 ， 此 处 4 为 给 定 的 已 知 
大 于 9 的 数 . 

18. 设 亚 t+， 马 。 和 了 1， ry FF, 分 别 为 抽 自 分 布 族 {BD, Ei 
和 {CD, 的 ) :于 0} 的 i. 祥 本 ， 考虑 变换 群 双 一 cz 和 一 二 坊 一 cp 
， 他 8 

一 于 .…. 站 1 1 
否 罕 在? 

切 . 计算 不 带 参数 的 情况 的 #2 统计 量 的 均值， 并 指出 计算 其 方差 的 方 
法 (方差 的 表达 式 很 复杂 , 见 [6] p. 条 9). 

20- 在 浴 -统计 重启 (一 mp)?/frps 中 ,在 wmax -各 一 pj 一 4<0.5 的 条 
件 下 ,其 最 小 值 为 和 mn 4 (最 小 值 对 tn, pi 取 ), 间 此 最 小 值 何 时 达到 |， 

21. 度 变 县 入 取 1, 2, py Ek 为 值 ， 县 P(E —p0), i wi] 
6EG, 满足 条 件 对 任何 rE&@ 和 s>0 有 ,sap 以 lp(6) 一 ps9) 1 >0. 这 
时 ,车 已 ，Xa， …, 四, 为 下 的 jj. 样本 ， 扣 = 闲 ( 耳 ，…， 玉 ,) 为 的 估计 ， 
但 不 相合 ， 则 存在 如 所 售 ， 使 对 任何 44<ee 有 lim aup PetW? > 己 ) 一 1 ,此 处 


于 


2 


-TOL » 


闪 一 2 [nm — npe6) Dnpe dy, 3 为 1 yy 娃 n 中 等 于 i 的 个 数 . 


22， 砷 、 乙 两 个 工厂 生产 同一 种 产品 , 要 比较 共 优 劣 ， 为 此 在 甲乙 两 厂 
的 产品 中 名 取 个 而 组 成 # 对， 将 每 对 拿 去 评定 ,得 出 “ 甲 好 "“ 乙 好 "、“ 光 
差别 ”三 个 评语 之 一 ， 就 ”对 的 评定 结果 ,用 癌 -检验 法 来 检验 “ 甲 、 忆 无关 
别 "这 个 假设 . 

23， 证 明 人 各 式 司 .5.30) . 

24. (a) 设 变量 有 ,了 的 分 布 函数 Fo(z) 和 所 (2) 都 在 (一 一 ) 连续 
严 增 , 且 存 在 点 9, 歌 0<Bo(@) < 二 ,人 (2) < 了 oa) 当 z<, s(n) ole) 


当 wg, 证 朋 ; 存在 连续 严 增 疝 数 9C2), 9g(2)>2 当 2<0, g(x) 一 7 当 2>a, 
使 gtw) 之 分 布 与 了 之 分 布 同 ，《b) 利用 (9) 证 明 ，Koxworopos 检验 不 是 天 
偏 的 取 demotq)， 设 aa， …， an 为 iid. 样 本， Bt 为 其 经 验 分 布 函 
煞 , 有 : 

Pr, (Bap| Few (2) ~ Fotw) [> 用 <Pr,Csup| Fowls) — Fole)| > 


3235。 设 样本 训 ，…， 各。 独立 , 四, 的 分 布 为 
二 exp er DO<a< mm, -= <b<oo), tf—1, 天 


设 及 "了 m, 为 各 ;的 i 二, 样本 ,i 一 1，…, ,8) 求 假设 本 :一 … 一 0% 
本 一 … 二 BB 的 似 热 比 禄 验 统计 量 。，(b) 求 假设 瑟 ::91=… 二 qs 的 伺 然 比 检验 
统计 量 , 《o) 在 ="… 一 0 的 假定 下 , 求 瑟 ;如 一 … 一 by 的 似 热 比 检验 统计 
性 工 , 证 明 ， 当 Hs 成 立时 , 4" 服从 分 布 Sm 一 局 一 1). Cd) 证 明 当 =2 
时 ,， (9》 中 的 检验 是 无 偏 的 ， 

26， 从 似 然 比 极限 定理 (定理 3$.6. 雪 推出 带 参 数 稍 况 的 2- 统 计量 的 极 
限定 至: 定理 3.5.2). 

27， 设 了 …， XZ 为 抽 自 友人 aa go) 由 的 馆 . 样 本 ,4 和 中 都 是 未 知 
参数 。 如 果 将 似 然 比方 法 用 于 检验 s<meya>o, 将 得 到 什么 结果 ? 证 明 
昌 则 让 本 例 申 定理 3.6. 工 的 条 件 不满 尾 ! 为 什么 ?但 似 然 比 统 计量 取 对 数 厂 
以 2 后， 仿 在 a<ao 的 进 界 上 以 码 分 布 为 其 和 极 跟 分 布 。 解释 这 个 事实 的 再 
由 并 沧 出 类 似 的 例子 ， 

区 设 了 的 分 布 族 为 {rl ww 人 ， 一 oo<0<coy， 设 开 ， Ra --， 
为 至 的 通 . 样本 ,选择 检验 的 水 乎 为 wa 一 azp (一 9), mm 为 一 让 然 数 . 求 检验 
问题 8~=0 03 = 工 的 序 贯 概率 比 检验 ， 算 出 此 检验 当 B=-0 和 89- 时 的 平 
均 抽 样 次 数 ,并 与 同一 水 平 的 男 定 样本 检验 的 样本 大 小 作 比 较 ， 

«TODe 


29. 设立 的 分 布 为 
PP 和 -IT 1 P(N-0.p, ， 
取 js 汶 运 条 件 gm 一 于 ， 0 一 工 一 外。 设 log dl /log (gotpoy =—a, log Bj 
tog btwfpo) 一 bp 呈 卫 部 是 自然 数 ， 设 Xi Xa，… 为 下 的 i 各 本 ~ 壹 上 
pjoe Dr=go 的 序 颖 扳 率 比 检验 ， 以 4 如 为 过 界 ， 证 表 这 时 过往 公 葡 
入.7 必 访 和 但.7.235) 成 为 严格 的 ,又 此 检验 的 功效 函数 为 B( 当 ) 一 -所 而 
BP) 一 (了 一 Do /qr pt), pr 

此 处 :加 

30， 设 下 的 分 布 族 为 {BC0, 的 , 9> 只 ， 取 定 w 90<a<I, 考虑 检验 问 
题 6<1c>9>1, 作 序 其 检验 如 下 ， 定 自然 数 m, my 以 及 mw bb 0<a<5<1 
福 次 一 个 地 观察 Xu Xa, …， 直 到 有 一 个 超过 工 或 抽样 达到 mm 次 ， 如 果 抽 
完 mm 次 (得 Xs, …， 和 w) 仍 有 一 max 五 ,<1, 则 当 了 <a 时 接受 竺 假设. 否 
则 继续 抽样 ， 直 到 有 一 个 超过 1 或 总 数 ( 连 已 抽 的 % 个) 达到 m+n 个 为 让 
当 抽 完 m 二 8 次 (结果 为 已 ，…， Znan) 时 ,计算 了 mtnax 下， 当 了 <<b 时 按 
受 零 假设 , ” 然 就 否定 替 假 设 。(a》 确定 a, 之 值 (不 唯一) 使 此 检验 的 真实 
水 料 为 &。 人 ) 计算 此 检验 的 功效 函数 及 平均 抽样 次 数 . 


第 名 章 


1]，(8) 设 了 1， "…" 了 ,是 外 Poisson 分 布 族 全 以 ), 和 >0} 中 抽 得 的 进 . 
样 太 , 求 入 的 UA 时 信和 界 ( 用 第 一 章 第 1 题 )，(b) 设 XI …， 互 。 是 从 负 二 
项 分 布 中 抽 得 的 钴 . 样本, 即 
下 十 ER 一 1 

x—1 
为 已 知 自然 数 , 0<8<1. 求 8 的 UMA 置信 界 . 

3. (a 设 一 批 产 品 闵 个 CN 已 知 )， 其 中 诬 品 个 数 对 未知 ， 从 其 中 随 
机 不 放 回 地 抽出 “4 个， 发现 其 中 变量 有 了 对 个 求 寻 之 一 UMA 赂 和信 于 界 . 
(hy 设 一 此 中 有 红 球 4 个 (为 已 知 )。 白 球 焉 个 ， 每 次 从 其 中 铀 一 个 ， 记 下 
绪 困 后 , 放 回 ,并 放 入 所 抽 得 的 颜色 的 蒜 一 个 ， 加 此 进行 次 ， 试 由 试验 结 
果 作 性 的 UMA 置信 上 界 ，[ 提 示 : 就 (a8) 而 寡 ; 当 加 定 及 时 ,了 的 分 布 不 连 


P(Xs=s) =( ) O10), z=0, 1 2 eh 


"T0383» 


续 , 这 可 用 象 信 :1.34) 那 种 方式 求 使 之 连续 化 . 又 另 一 个 国难 是 :参数 空间 
只 有 有 限 个 点 0, 卫 …， 开 ， 用 下 述 方法 把 参数 空间 扩展 为 0<g<X. 当 
开 二 日 < 下 十 基 有 时 。 Pa( 放 -站 一 个 一 下 及 吾 一 人 十 这 二 一 分 下 《 误 一 六 证 明 
这 拌 的 分 布 旋 仍 为 单 嫉 雇 然 比 的 。 经 过 这 两 层 处 理 就 可 以 使 用 定 理 生 .1.1， 
对 (b), 作法 是 类 似 的 .] 

3. 设 对, …。 为 自 {RC91, 03): 一 <81< 的 <o0} 中 扫 出 的 id. 样 
本 ，(a) 条 后 一 色 的 相似 置信 区 间 。 Cb) 证 朋 ， 芝 以 全 和 Xiw 分别 记 才 ， 
…, xn 中 的 最 小 和 最 大 者 ， 则 (2D 十 关 w 一 钠 一 0)/ CE 一 到 Ga 之 分 布 与 
gu 9 无关。 求 出 这 个 分 布 , 从 而 作出 分 布 均值 到 (8x 十 bo) 之 一 相似 置信 区 
间 . 

4. 设 五。…, ZZ 为 取 自 {R09), 9>0} 中 的 知 . 样本 求 6 的 形 如 
[orXww, oo] 而 性 信 系 数 为 1~a 的 置信 区 间 中 ,平均 长 度 最 小 者 , 间 所 得 
区 间 佑 计 是 否 为 无 偏 的 ? 

5. 设 五 , …, ZX, 光 抽 自分 布 族 本 eoleFoo Cy :9> 叶 的 iia, 样本 ， 
而 as…< ww 为 其 次 序 统计 是, 设 现在 手头 只 保留 了 (或 只 观察 了 ) Xo 
Xe …， KoCLsr< 屿 ,在 这 基础 上 求 6 的 UMA 置信 界 ， 

6 (a) 设 瓦 ，…， 蕊 。 为 抽 自 分 布 族 {ore-elte -im) :一 oo<g< oo} 中 
的 iid. 样本 , 求 9 的 UMA 赚 信 界 . (0) 对 分 布 族 [二 -on 一 0) :1 wx) 
dx， 一 “<B<m}, 设 法 来 出 9 的 一 个 相似 置信 界 (注意 ，(a)、(b) 两 个 情 
况 的 本 质 差别 在 于 ， 在 人 @) 中 zin 了, 为 充分 统计 重 而 在 (b) 则 否 ， 在 (b)， 
可 利用 min ,6 的 分 布 与 9 无 关 的 事实 ). 

7. 设 Xu …， 蕊 为 摘自 分 布 族人 ee ooTo (oD):a>0， 一 <b 
<=-| 的 iia. 桩 本 。 (a) 求 a 的 UMAU 置信 区 间 ( 提 示 。 利用 第 三 章 第 1 
题 )，(b) 作 b 之 一 相似 置信 区 税 [ 提 示 ， 以 区 ac，… 呈 区 记 次 序 统 计量， 
证 明 EXww 一 D] /FXeo 一 Ze] 的 分 布 与 mw 8 无 关 . 为 求 这 个 分 布 ,证 明 分 
子 分 母 独立 , 而 分 母 服从 Gamina 分 布 ， 可 以 证 明 ， 这 样 得 到 的 星 信 区间 是 
UMAD 的 ]， 

8. 设 样本 互 ， 了 独立 ， ~ Hem, Pu), FBen, Pa)， 任 ， 竹 已 兰 ， Op 
< i 一 12, 证明 1 一 pa)/pol1 一 py) 的 UMAU 区 间 估计 存在 . 

9 设 XX 和 了 了,…, 了 分 别 是 从 分 布 族 fperarTo (2) ;91>0} 

， TO4» 


和 { 虽 8-22T00， yD): Oe -0 中 四 出 的 和 记 , 样 本 ， 束 30:+ 让 的 UMAU 团 信 
这 间 ( 提 示 : 站 的 分 
导出 一 个 指数 族 , R30 +0s 为 其 一 稍 负 ). 

10， 衣 及 下 m 和 了， …， 了 分别 为 自分 布 族 {RCO， 全 ), 负 > 信 
和 {RCO0，02), 纺 >- 人 0 中 抽出 的 调 , 样 本 。 设法 求 出 Bo/@ 之 一 相似 置信 区 
阅 . 

芽 , 在 上 是 中 ,用 Fisher 的 信仰 推断 法 求 出 向 十 之 一 区 则 估计, 使 其 
* 信 仰 系数 ”为 1 一 a， 对 一般 矶 ，+s 指出 计算 过 程 ， 对 加 =%*=1 计算 出 结果 
(提示 : 由 床 - max 之 分 布 与 鲜 无 关 得 出 6 之 信仰 分 布 ， 同 理 对 ba， 用 
求 和 法 找 币 十 外 之 信仰 分 布 )。 

也， 设 瑟 5 pp 五 和 了，…， 了 。 分别 为 抽 自 Nia, oD 和 了 Ca，Po9) 
中 的 证 . 样本 , p>0 已 知 , & 0 未知. 求 a 的 UMAU 加 信 区 癌 ， 

13. 设 及 … mn 为 自 对 C4 9) 由 抽 出 的 记 , 样 本 。 找 gj/o 之 一 相 
似 置 信 界 :提示 利用 第 一 章 第 3 题 ). 

14， 设 思 ， 是 从 Weibull 分 布 族 (这 ) eIe, b> 


0 > 中 中 抽出 的 iia. 样本 (ay 写 出 为 求 58, 的 报 大 似 然 估 证 的 似 然 方 
程 ， 人 b) 设 六 8 为 似 然 方程 之 解 , 证 明 &ye 之 分 布 与 5 无 关 ， 指 出 由 此 作 
出 e 的 相似 置信 区 间 的 方法 . 

巧 ， 设 要 作 NW(9, 1) 中 的 8 的 固定 长 为 28 的 区 间 估 计 ， 取 定 自然 数 
mo>1， 定 一 切 其 平均 抽 祥 次 数 不 超过 +% 的 ( 序 其 或 非 序 其 的 ) 长 为 和 8 的 区 
僻 居 计 中 ,轻信 系数 不 能 超过 2 了 CY?w08) 一 1， 生 这 个 最 大 值 在 下 述 区 间 舍 证 
达到 ， 抽样 各 次 ， 然 后 以 要 填 # 作 为 9 的 区 阅 悄 计 T[ 提 示 : 决定 c， 致 
2[DVmD — BVI)]>e>2E0(Vmt+13 一 人 D(Ano5)] {请 读者 自 证 : 
DOCH 一 加 (VN 一 18) 随 才 增加 向 下 降 》, 然后 考虑 序 贯 判决 问题 , 其 中 每 
次 抽样 费用 沟 6, 而 损失 为 上 (9, [a, b])=0 或 1, 视 [9, 缮 包含 日 或 否 而 定 ， 
证 明 在 一 切 定 长 8 的 区 间 居 计 中 ， 周 定 抽 样 wm 次 且 以 及 土 8 为 区 间 估 计 者 
为 Minimaz 解 。 和 窝 证 后 一 事实 , 取 台 的 一 申 先 验 分 布 NC(0, 5), 令 rco]. 

16， 设 ZL，…， Zs 为 抽 自 以 (4, 92) 中 的 iia, 样本 。 为 作 a 的 区 则 全 
计 , 引进 损失 水 数 


Lig, G, 0, d= oo 站 “之 攻 皇后 


Sm 当 aE[e, 四， 


是 了 0 


并 以 第 二 这 18 题 中 的 先 验 分 市 作为 此 灶 的 先 验 分 布 , 试 求 Bayes 解 . 证 明 ， 
适当 选择 入， 可 优 当 -> 时 此 Bayes 解 趋 于 置信 系数 1 一 a 从 <a<]) 的 
扩 攻 间 沾 讨 ， 
17， 将 $ 生 .3 中 所 论 Btein 的 两 阶段 抽样 作 如 下 的 楼 改 ， 可 得 Na, ao?) 
中 的 4 的 一 定 长 且 相 似 的 置信 多 间 ， 先 再 察 ，…， 忆 算出 
1 


= 六 《 王 , 一 立 )2. 

i+ 流 ma fot, | 和 |+ 寺 . 
此 o> 为 一 既定 的 常数 ， 继 号 观察 Xr1,…， Xs、 由 条 件 
和 


定 册 1,，…; an。 证 明 : Ra/ Ei, 措 明 利用 这 性 质 作 具有 


所 壕 性 基 的 区 间 估 计 的 方法 ， 问 本题 的 抽样 方案 与 4. 了 二 ) 中 给 出 的 何 
者 为 好 9 

18.， 设 为 估计 某 ( 一 维 ) 参数 9, 引进 损失 本 数 工作 则 二 璇 但 一 们 .此 
处 本 C0) 二 0, 仇人 的 和 0 当即 和 有 证 从 在 1 了 >0 竺 非 降 , 而 在 ieE0 时 非 增 . 
车 对 任 结 8>0 存 在 ?及 基于 样本 1, -jn 的 估计 重 Sn (TX1, pF 玉 。); 歌 
及 人 ,3 吧 E 对 一 切 晶 证明， 对 任 给 sa>0 和 ?>0 存 在 # 及 基于 样本 1 

的] 已 的 区 和 冶 情 计 CDaCXr Wy Kn) Da Ky, 六 直 En}], 使 其 长 总 不 超 

过 n, 且 罩 信 系 数 不 小 于 1 一 ga. 人 疝 ， 此 结果 之 逆 是 否 成 立 ? 

19， 设 7a) 为 一 定义 于 (一 oo， 0) 的 非 负 Borel 可 油 函 数 , | f(a)de 
一 ]， 设 随机 变量 蕊 的 分 布 族 为 

{f( 入 4 ) dr — oo0 oo0, 。>0], 

证 明 ，4 专 和 《用 &4, 臣 五 ) 的 记号 )( 提 示 :， 在 使 用 定理 4.3.4 时 , 重要 的 一 
步 在 于 证 明 lim 矿 17Kz+ 有 一 flac=0). 


20. 证 明 (a) 分 布 族 忆 (6- 总 8+ 寺 ), -<9<oe| 中 ,6E8 (hy 
分 布农 {及 CW, 的 , 8>0} 中 ,ES 他 ES，(0) 设法 证 明 让 由) 中 , 8E8， 
(提示 ， 考虑 下 述 方案 ; 选 定 自然 数 如, 观察 1 …, 和， 计算 Ye mar X,. 
选择 c> vv 计算 #4=[c¥], 继续 观察 tl yg .ee El max Xo max X, 


+ 如] 作为 8 之 区 阅 估 计 . 定 出 mw 和 6 使 比 区 阅 估 计 约 轩 信 水 平 不 小 于 1 一 Qa). 


a TOG* 


人 对 切 题 , 设 | ， 呆 (ze)az=0, 证 明 aE8o (提示 ， 使 用 引 理 4.3.6)- 


第 五 章 


1. 设 有 线性 槛 型 YXB+te,， VAR(e)=qV， 证 明 (8) Ble'Be) = 
qtriBVY， (Ch 当 & 为 正 杰 时 ， 有 Var (Ce'Be) =201I(BVYBW. Ke 设 训 
= 了 以 如 记 且 的 IS 估计 ， 则 局 4 司 -- GatrkS-1L40) 为 B4B 的 无 偏 估计 (8 
一 大" 站， 全 的 定义 如 {5 .3.15)Y. 

3， 设 有 线性 模型 了 一 有 十 e， TAR 一 of (3) 若 记 TE(ZD =+, 则 
线性 无 关 的 零 的 无 僵 估 计 有 pm-r 个 (n 为 了 的 维 数 )。 人 bp) 设 er 有 为 可 估 函 
数 ， 引 进 损失 函数 LC9, oa, 丰 二 (8 一 cB)2o’， 则 任 一 线性 浮 歼 a'Y 为 co8 
的 无 偏 居 计 的 充分 必要 条 件 为 其 风险 耳 数 有 界 . 

3， 把 下 面 两 个 估计 问题 纳入 线性 模型 的 范围 ，(@)3L …, Zs 是 从 
Ng, oy 中 的 iia. 样本 ,估计 4，C)30,…， 及 % 和 于, …， 卫 是 从 Na, o2) 
和 (Bb, pay 中 取出 的 记 . 样本 , p 已 知 、 

4， 线 性 模型 Y 一 Be, VARCe) 一 g2V， 为 了 YiAY 为 09 的 无 偏 信 
计 , 4 应 满足 什么 条 和 件 ? 

5， 线 性 模型 了 一 XRB +ey 在 月 的 一 切 I[ 估 计 CY 中 ,以 C=StX' 时 
长 度 达 到 最 小 . 

6， 考 虑 一 个 无 交互 效应 的 两 因素 设计 模型 

Yu—ptot ht es 和 二 wo, Tj, , , 


pa By 等 为 参数 , 诸 sw 独立 , 淘 情 为 9, 方差 为 0，， 试 将 这 模型 写 为 通常 
的 线性 模型 了 一 外 Be 的 形式 ， 写 出 设计 矩阵 互 并 确定 其 秩 ， 又 证 上 明 : 的 
束 条 件 a 十 … 十 i 二 雇 十 … 二 户 /=0 满足 定理 5.3.9 的 充分 必要 条 恬 ， 

7， 线 性 模型 了 一 X 户 十 e, 约束 五 A 一 站 如 果 任 何 站 此 约束 下 的 可 估 范 
歼 在 无 约束 时 也 可 估 , 河 互 满足 什么 条 件 ? 

8， 试 用 化 为 典 则 形式 的 方法 证 明定 理 5.2.6. 

8， 查 8 于 Be 中 , 若 导 中 的 元 素 只 取 士 1 为 值 , 则 设计 天 称 为 称 量 
设计 ， 一 个 元 素 只 取 土 1 的 方 阵 称 为 Hadamard 方 阵 , 老 其 任 丙 列 正 交 ， 现 
在 假定 认为 了 维 , n>p, 而 nn 阶 Hadamard 方 阵 存 在 。 则 在 使 及 的 一 切 分 
量 可 估 的 称 量 设计 中 ,由 拉 阶 Hadamard 方 阵 的 任意 卫 列 构成 的 设计 , 使 月 
的 每 一 分 量 的 LS 估计 这 到 最 小 值 , 


a OT 。 


功利 用 Z7skind 定理 证 明 ， 要 线性 模型 Y=XBte,， YAB(Ce) 0G 
中 , 任 一 可 估 匈 数 的 区 估计 与 其 GM 估计 重合 , 充分 必要 条 性 为 存在 对 称 
方 阵 4 加 以 及 满足 条 件 WC(Z} 一 .4+(X) 的 矩阵 2, 致 G=XAX' 2'BZ, 

卉 ， 线 性 回 妇 模型 一 Bt, VARCey 二 93: 诬 为 性 关 六 矩阵 ， 舟 为 
PP， 证明 ， 在 + 个 和 试 验 点 的 玖 泊 误 差 的 方差 之 和 为 (mm 十 苞 寺 

芭 ， 设 观察 值 五 , …， 了, 与 参数 局 ,…, 有 的 正确 关系 是 线性 模型 

Y~ XB+ewm (Kp: xa)( 人) +。 
而 我 们 由 于 不 了 解 ,或 为 计算 简 醒 计 ; 采用 了 模型 一 XpBp+e, 设 (XPXPp) 
存在 . 设 我 们 从 后 一 模型 中 算出 了 Bs 的 LS 估计 霹 ， 问 。 外 为 后。 的 无 偏 
估计 的 充分 必要 条 件 是 什么 ? 解释 这 些 条 件 的 意义 ， 

13. 续 上 三， 以 R83; 记 模 型 Y 一 XpBp+# 下 的 我 盖 平 方 和 , 站 为 在 
模型 了 了 一 下 有 a 之 下 按 公 式 (5.3. 基 ) 给 出 的 四 的 估计 ， 证 明 落 e~WG 
oD, 则 

BL RSP/6]—n—t+ 一 3 七 一 


ee 
此 处 上 为 局 的 维 数 , 为 6z 的 维 数 ， 
地 ,线性 模型 了 了 =fo8 十 革 证 ae, 其 中 四 为 4Xp 阵 ， 记 为 一 维 参数 ,8 
为 # 维 列 向 量 , 其 各 分 汲 爹 为 1,， VAR(e) 一 ao 和, 又 (XX)-1 存在 。 考虑 月 
的 在 一 线性 估计 应 LY, 其 中 王 满足 LE=0.、 记 


Jz=- lxBs -XB +ncF -B09. ( ?= 二 六 ) 


RS YYe— XBW. 
证 明 
ETLY 1+ir(X'XLLY 二 十 PACXE— DXL— TRB, ECRSSL) 
一 DC 一 1 ~ 2triLy oo + FERE— IY(XL— DARB. 


15， 考 虚线 性 回归 关系 9y 一 2 有， 在 $5 个 点 wi … wn 处 作 试 验 , 得 
到 一 好 月 二 ap il, 和 


人 


彼 定 YAR(e) 一 on1， 去 掉 第 i 次 试验 ， 就 剩 下 的 一 I 次 试验 构成 线性 撒 
" 08 


型 ， 在 这 线性 模型 中 求 出 8 的 LS 估计 为 后 9。 以 第 上 个 试验 点 作为 核验 次 
料 ， 得 在 该 点 之 预测 误差 fs 了 :一 吉 民 9。 这 样 一 共 得 到 加 个 值 4，…, 访 . 
其 平方 和 , 即 六 开 , 在 文献 中 常 简 记 为 PRESS， 证 明 ， 洁 以 (Bo …。 2) 记 ， 
由 您 部 ?个 试验 点 所 构成 的 线性 模型 中 的 残 差 向 量 ， 而 届 为 方 降 
一 CC 的 有 元 ,i= 名 … 9, 则 PRESS= 训 (4/40 提示 
注意 旋 ~ 工 一 改 CKX 26)-2XYGD， 此 处 了 GD 为 由 Y 中 去 掉 五 所 成 
的 2 一 1 维 向 量 ， 将 加 并 和 为 (aya0? 都 未成 Y 的 二 次 型 , 求 出 这 两 个 二 次 
型 的 系数 年 隆 , 设法 证 明 这 两 个 矩 降 的 相应 元 是 相等 的 ]. 

16. 设 4~ (ad) 为 短 隆 (不 必 为 方 庄 )， 了 C4) 为 和 的 数 野 丁 数 , 则 91/84 
定义 为 一 个 与 及 同 阶 的 征 阵 一 (Bw), Bu 一 9/3au， 证 明 以 下 关于 短 阵 导 
数 的 公式 (90twA dA/24= (A (An (BAdo) /dd=up', 
Co)3tr(44)/34 ~24,(d) 车 至 为 对 称 方 阵 , 则 2Cw'Bu) /9u 一 2Bu， 在 以 
上 请 式 中 ,tv 都 是 列 向 量 ,Ce) 利用 算 阵 导数 这 个 工具 证 明 下 面 的 结果 
设 有 线性 模型 了 一 X 户 +e,，VARte) 一 o27, 则 使 [IAY -BI 站 达到 最 小 值 
的 4 为 4~BB'X'/(o?+B'X'XB). 

17， 举 一 简 例证 明 ， 如 果 线性 模型 的 误差 。 不 为 正 老 ,那么 艺 使 有 
YAR(e) -as 可 信函 数 的 LS 估计 不 必 重 合 于 其 线性 无 偏方 差 最 小 合计 ， 

18， 设 瑟 Cz)=b。 VARCY) =o21 工 对 猴 且 工 的 特征 根 全 在 [0, 1] 内 ， 
则 二 工 YI8 的 充分 必要 条 件 是 *E-AGI 一 号 此 处 w+EY 的 可 容许 性 
是 在 一 切 形 如 + 的 估计 类 中 而 言 . | 

切 ， 证 时 ， 岭 回归 估计 与 均匀 压 况 估 许 在 线性 估计 类 中 可 容许 (在 任何 
二 次 型 损失 之 下 ). 

320. 设 是 CY)~9，VAB(Y)~otUD, 由 系 5.5.1 以 及 定理 5.5.3, 得 到 
LY16 的 两 组 充分 必要 条 件 如 下 

《D: LU 对 称 | 工 的 特征 根 全 在 [0, 缮 内 ， 

(ID: LU 对称 ; LUL <LV. 

证 明 (用 纯 短 降 方 法 )CI)、CIDD 确 是 等 价 的 . 


第 六 章 
1， 设 年 的 密度 为 f(z)dztz 为 一 维 的 ), XJ Zs 为 卫 的 iid, 样 本， 


* FOP 


以 西 玉 记 样本 到 1, 下 s, 工 s 中 中 高 最 接近 的 那 两 个 , 且 < 还 明 : (DV, 六 
的 密度 为 


ge CY EUV) 0)] 
这 里 (wy = 7) 直 ， 


2， 没 X，Zs， Xa 为 取 自 和 (0, 1) 和 id. 样本， 六 为 其 板 益 ,证 明 妊 的 


Tie VI 
由 班 计 抠 (RR), 未 经 计 昔 ,证明 ECD =2E(X), 了 jy 一 m8T(RL 交 2 工 9)， 
然后 到 过 间接 计算 证 明 这 个 事实 ， 
3. 设 互 让 离散 分 布 
PCB 一 po 这 六 了 2, .1 Pimpy, (Po=0). 
产 
巡 避 为 下 的 大 小 为 刀 的 iia. 样本 的 极 差 ,证 明 
PIR=?) -总 {Por — Poa) (Pye— PA CP — P14)" 


Hw " 
ede, ?> 


十 【1 一 一 工 2,., 
P(R-0) -Br 


4. 设 一 维 变量 关 的 分 布 PL) 连续 且 关 于 4 点 对 称 ， 不 山寺"… 志 0m} 是 
五 的 肥育 社 本 ， 记 下 一 如 5X( 且 co， 26 一 站 wy)， 证 明 
1, 区 二， 
ELRS 了 >r] = 1 27 Yn, <r<l, 
0, rl1. 
5. 设 吾 ( 开 ) 一 0 Var(X) ~1 yi, 避 为 五 的 设 . 样 本 , 了 =imax(Xn 
证 昌 了 了 避 存在 且 了 (DD) 有 一 人 /VY C24 一 1)[ 提 示 ; 用 公式 BCY) | 


= 他 mr3C9Oap 人) 以 =(79 记 (的 反 函 数 ,得 
BOT) = | , nn"tgCP) a, 
1 
注意 到 人 =(PaF 一 六 oaF(o 一 0 知 想 驴 = 人 ep 一 Die(Eodg。 朋 


Bohwarz 不 等 式 ， 注意 | 地 (FAP el 序 得 。 以 上 证 明 中 涉 避 用 驴 作 为 新 
* Fi . 


变量 而 将 * 视 为 开 的 机 数 , 当 下 为 连续 严 增 时 ,这 一 点 没有 问题 。 对 下 为 一 
般 情况 则 尚 锋 严 格 证 明 ， 这 一 点 可 利用 引 理 3.7.3 中 证 明 的 事实 得 到 , 请 读 
者 补 出 这 个 严格 证 明 ]. 

6， 我 们 已 经 知道 , 若 一 维 变 量 刁 的 分 布 函 数 王 连续 ， 则 FCX) 一 吾 (0， 
巧 。 证 明 ， 如 果 加 那 怕 有 一 个 不 连续 点 ， 则 这 个 事实 不 再 成 立 . 又 ; 车 世 
的 维 数 育 于 1, 即使 其 分 布 函数 了 连续 , 是 否 仍 能 断言 F(X) ~ 呈 (0, 1)? 

7. 设 互 的 分 布 阔 数 下 (x) 连续 , 0< 凡 <1, 记 

dinf {F(tE) pp}, benp {FE =p}, 


站 ， 区 所 全 
则 lim PCRImg <2) 1 1 > 
tim 
可 ， Tb 


此 处 关 y 专 … 志 下 (s) 为 取 自 下 的 有 了 序 样本 . 
8， 设 有 山 气 … 志 起 on 为 取 自 RC0, 1) 之 有 序 样本 ,而 
I= 
证 明 ， 卫 ，…， 了 独立, 且 都 服从 分 布 BC0, 1)， 


9。 证明， 分 布 隆 数 
0, EE 
机 (加 一 4 expt — s/t —r)], Or<1, 
i, >=1, 
属于 工 型 极 天 导 分 布 的 吸引 场 . 


10. 证 明 ，Caachy 分 布 谢 于 开 挤 极 大 值 分 布 的 吸引 场 

也， 设 也 为 一 维 分 布 函 数 , 证 明 (a) | PCe)aF(a) > 于 ， 且 等 号 当 且 
仅 当 五 处 处 连续 时 达到 (此 外 注意 ,积分 三 ,也 (zdP(z) 理解 为 Lebesgue- 
Stieltjee 积分 ), 又 六， PKa)SF(e 可 取 [ 震 ，1] 这 个 区 同 内 的 任何 值 。 (b) 
车 Py yp xn) 为 理 维 连 续 分 布 国 数 ， Li bu i Fi Tn RF (XT1, gp 
zm) < 二 且 可 取 任 意 接近 于 0 之 值 ,但 不 取 0 为 值 . 


蕊 . 以 户 记 定义 于 《一 oo》 的 一 切 满 足下 述 条 件 的 实 值 亚 数 的 集合 : 
全 | 上 县 全 一 天国 尾 一 外 .以 天 记 一 切 一 维 分 布 函数 的 集合 ,在 
其 中 定义 距离 49 如下; 


dp, Danp | TeDaP(o 一 人 Faac 人 |. 


到 了 LE 


和 证明 ，lim dt ~0 的 充分 必要 条 件 是 对 下 的 任何 过 续 点 光 有 
lim FCm) = Pw). 


18. 设 关 为 其 方差 存在 有 限 的 一 秆 一 维 分 布 的 族 ， 基 为 此 分 布 族 的 大 
小 为 工 的 入 本 证明， 若 9CF) 一 也 的 方差 , 则 水 存在 基于 工 的 , 9(F) 的 无 . 
偏 估 计 . 

14， 以 红 配 记 一 维 分 布 了 的 玉 阶 中 心 乱 , 器 3 固定， 以 严 记 一 切 其 
9( 所 -存在 有 限 的 一 维 分 市 的 族 .， 1，…, 下 为 所 和 此 分 布 族 的 ia. 样本 ， 
证 明 ， 尖 #9> 下 时 , 直 于 五 , …， XX, 的 , 8 本 的 无 偏 佑 计 存 在 ， 

匡 ， 设 严 是 一 切 一 维 分 布 的 族 ， 证明， 存在 定义 于 稀土 的 有 限 实 值 函 
数 入 矶 ， 使 对 任何 zu 基于 从 严 中 扫 得 的 iid. 样本 ZZ …，XZ, 的 , 8(F) 的 
无 仿 估 计 水 存在 ， 

16， 控 公式 人 6.2. 妈 定义 5, c=1，…, m， 证 明 ; of/e<a3/4d, 当 cd. 

她， 定义 核 函 数 
1， 当 xz 十 gz0 
90, 当 wry<0, 

设 等 …， 工 , 为 控 自 一 纵 分 布 玉 中 的 雇 . 样本 ， 为 此 样本 的 以 为 核 
的 好 -统计 量 。 当 尺 连 续 且 关于 原点 对 称 时 , 算出 ,的 方差. 
18， 定义 口 (一 1 或 0 视 w0 或 4<0 而 
my 1) Ca, 的 力 一 和 2 一 2 的 一 的 ) 
设 (X。 7D, i 一 4-…, 5 为 取 自 二 维 随 机 向 量 ( 且 ， 卫 的 雇 . 样本 ,， 态 , 为 此 
样本 的 以 由 为 核 的 矿 统 计量 ， 在 互 了 独立 且 其 分 布 连 续 时 , 算出 的 方 
莽 . 

芭 . 设 和 0s mg; %i， 切 ?是 两 组 变 蜂 的 梳 , 定义 为 ， 以 了 和 也 分 别 记忆 
zy 9 为 端点 和 以 圾 ;8 为 测 点 的 区 间 , 而 
1, 车 世 cl 或 cl 
0， 其 它 . 

设 Rb … Xn, 和 瑟 ,…， 了。 分别 为 抽 自 一 维 连续 分 布 和 中 的 记 . 样 
本 、Uh,n 为 5 统计 量 ， 问 ， 这 个 厂 -统计 量 可 用 案 检 验 那 种 性 质 的 两 样 宁 
假设 ? 算出 画 数 加 oCz2) =: [下 (ys 页， 马 )] 并 写 出 其 方差 的 表达 式 ， 

各. 设 史 了 … w) 为 核 , qa， …， 了 ,为 抽 自 分 布 加 的 iid. 样本 ， 
这 二 本 记 样 本 莹 a …， Zw 的 可- 统计 最 ,i= e, 而 可 为 
合 样本 mu won, 的 V- 统 计量 ,假定 全 = 和 F= 也 Bp[g (EL.…, 六 

-4 


tls, 的 =| 


Bm a 1, Ya) = 


re 


cof 久 1 mw 龟 立 ,各 有 分 布 百 )， 且 全 十 加 对 j=1,，…, &， 证 明 , 若 记 
= 十 下 十 Wh 则 


Bs (0 ) -ov 


324， 设 币 (RU …* 下 m) 为 核 , 及 …， Zs 为 取 自 分 布 了 的 记 . 样本 ， 
了 于， 为 Kl, pp 屋 。 的 UU- 统计 景 ， 而 


GX) 


假定 耳 p( 和 三 oo 则 对 任何 <<1, 有 
lim m0 0 

28. 设 四 (了 … wm) 为 核 ; 如 5 (BD 人) 二 oo0， 讼 了， …， 四 n 为 取 自 了 的 

iid. 样本 . 以 古 记 五 统计 里 , 币 定义 了 5 如 (6.2.13). 证 明 
C9 
nal) 

398. 设 已 ，…， 六 为 取 自 一 维 连 续 分 布 的 雇 . 样本 ,以 思 记 下 ,在 
Ra pp 下 中 的 秩 ， 计算 RCR) 分 =i 和 i 于 I 两 个 情况 ， 叉 计算 
ELE IX, Xa). 

34， 设 站 瑟瑟， Rn 的 意义 如 上 题 . 设 i 站 j, 定义 

gm, DECRIX=L, Fs—). 

证 明 ，g(% 护 为 x 的 非 降 函数 , # 的 非 半 函数 . 

中 .关于 刻度 参数 的 两 样本 Mood 检验 ， 设 下 ,下 和 卫 ，， 
分 别 为 抽 自 分 市 了 FCw) 和 天 (8x) 中 的 i 二. 祥 本 , FF 连续 ,未知 , 0<8<1l， 丑 
检验 假设 8 一 二 Mood 检验 是 基于 统计 量 

™ 3 
2 

这 里 玉 =w 十 % 而 部 , 为 瑟瑟 在 合 样本 由 之 秩 . 验 明 2? 属 
于 Chernoff-Savage 型 的 统计 量 , 满足 定理 6.3.1 的 全 部 条 件 ,给 出 mw 和 对 
的 表达 式 并 在 一 工 的 情况 下 算出 px 和 co 之 但. 

26， 续 上 题 ， 取 了 rm 一 [ETz)]G 为 NOCD, 1) 的 分 布 画 数 的 反 国 
数 ), 作成 Cherno 站 -Savage 型 统计 量 ， 证明 定理 6-3.I 的 条 件 满足 . 


3 1 1 LI 
27. 没 Ax={l, 2 N}, By {l,i 


记 由 4r 和 和 By 算出 的 厂 性 贺 换 统计 车 . 问 这 统计 量 经 过 规则 化 (Lx 一 Xjoy 
后 , 当 六 一 % 时 ,以 什么 分 布 为 极限 ?这 个 例子 说 明子 什么 问题 ? 


= 人 在 3 。 


28， 设 地 ={94 7 au 和 = 二 印 …, 及 ,poor 的 意义 见 革 6.4( 二 )， 
间 : 条 件 RCAY/ Wo,( 委 ) 一 O00 与 条 件 克 页 Ff 的 关系 如 何 ( 即 ， 是 等 价 , 或 
是 一 个 比 另 一 个 强 ,等 等 )， 

29，(a) 举 出 4,, B, 都 满足 条 件 机 但 1duw B,} 不 灌 足 条 件 基 的 例子 . 
(b) 举 全 证 明 ， 仅 仅 假 定 4,. 和 8, 都 满足 条 件 寻 不 足 到 推出 Ce 一 和 ?7 
gu. 一 > N00, I( 往 ， 作 (人 b) 要 利用 定理 6.4,8 及 [83 pb. 293, &.)，(o) 设 
4 二 ea aa 上 ,车 对 任何 满足 条 件 贡 的 刀 .= [Bo py po {4 B.} 
必 满 足 条 件 型 , 则 4, 满足 以 下 的 条 件 ; 对 任何 满足 条 件 


lim n, = o0, Hm py 一 = I 
Em bd 


必 有 lim a [Sar, — uy) /as a) | |=u. 
证 明 这 个 条 件 比 条 件 驴 强 . 

30，(a) 考虑 由 题 的 Mood 检验 用 于 单 边 的 情况 . 8 一 Te>8> 1 以 及 在 
正 态 情况 下 (5 到 妃 , … ,六 为 取 自 友人 0,o9 中 的 说 .样本 ,检验 = 工 车 二 二 
的 检验 (a 冯 Hie 为 否定 域 ) 计算 这 两 个 检验 的 坊 RE。， (了 在 记 (w) 一 
厂 e vio, 2 的 情况 下 ; 计算 Wileoxon 检验 对 本 检验 的 4EH. 
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